一种基于多模态特征融合的认知状态识别方法

本发明提出了一种基于多模态特征融合的认知状态识别方法，首先，基于多头注意力机制捕获交叉模态的时间演化规律，通过动态权重调和跨模态特征的贡献度，提取和认知状态相关的共性特征。其次，设计双模型协同验证策略，筛选出目标域的高质量伪标签数据，并以此进行自训练，避免域适应方法对辅助模块的依赖。经过定量与定性的综合实验对比，表明本发明能够显著提升认知状态的识别精度，所设计的伪标签优化机制在不增加模型复杂度的前提下，可迁移至相关的认知状态识别任务中。