一种基于轻量化模型的车载语音识别方法及系统

本发明涉及智能网联汽车技术领域，更具体地，涉及一种基于轻量化模型的车载语音识别方法及系统。该方案包括设置移动相机为主传感器，毫米波雷达数据为辅助传感器;进行时空校准，将坑洞位置和坑洞直径传递给主传感器;并将临时路标的中心位置和临时路标的类型传递给主传感器;将坑洞位置和直径与主传感器的全景视频流进行同步融合，形成第一同步融合数据，并进行语音提示;将临时路标中心位置和类型与第一同步融合数据进行同步融合，形成第二同步融合数据，并进行语音提示。该方案通过部署车规级边缘计算模块和运用轻量化的模型，实现快速的多传感器数据的语义融合处理，实时生成包含道路坑洞、临时路标等信息的 3D 语义地图。