摘要
本发明涉及一种文本引导的语义场景补全方法及系统,其中,该方法将完整点云划分为可视点云区域和不可视点云区域,通过点云编码器得到可视点云特征和不可视点云特征,通过文本编码器得到完整文本描述的完整文本特征,根据可视点云特征、不可视点云特征、完整文本特征和相似性损失函数对点云编码器和文本编码器进行对齐的联合训练,通过联合训练后的点云编码器和联合训练后的文本编码器得到残缺点云的最终残缺点云特征和残缺文本特征,根据最终残缺点云特征和残缺文本特征得到待补全实例,并根据待补全实例和残缺文本特征生成的补全点实现对残缺点云的语义补全。由此,本发明在场景存在大面积缺失时,能够以文本为引导进行语义补全,提高准确性。