摘要
本发明公开了一种基于上下文感知与模仿学习的目标驱动导航方法及装置,基于目标检测器DETR,识别图像中感兴趣的物体实例,构建物体图。基于上下文感知图推理,在导航过程中以图像、动作和记忆等动态上下文信息为指导,在每个时间步借助TransH方法将物体特征投影到相应上下文的超平面上,动态学习物体关系,使智能体更好地理解复杂环境。基于Transformer的视觉表示,融合视觉特征和图特征,更好地捕捉环境的空间语义信息。基于生成对抗模仿学习,设计新的动态奖励函数,结合环境奖励,帮助智能体避免死锁状态。基于标准的异步优势演员‑评论家算法,利用新的奖励函数训练有效的导航策略,提升智能体在陌生环境中的导航成功率和效率。