一种基于深度估计与多模态特征融合的生猪体重测量方法

本发明提供了一种基于深度估计与多模态特征融合的生猪体重测量方法，首先初始化并读取相机设置，捕获RGB图像，然后通过深度估计算法将RGB图像转换成深度图像序列，使用vit模型对深度图像进行特征提取，将提取的特征与深度估计中提取的rgb特征进行特征融合，并通过多层感知器回归模型来预测猪的体重。本发明利用单目RGB图像，通过深度估计神经网络重建目标的三维空间结构信息，采用先进的单目深度估计网络，通过Transformer编码器捕捉不同图像之间的相互关联和影响，并结合残差连接提升网络梯度传播效率，从而增强对猪只姿态变化、遮挡遮盖区域以及背景复杂性的鲁棒性，通过自动化测量大大降低人工成本，提升体重测量的精度和效率。