摘要
本发明公开了一种课堂互动分析方法、装置、边缘设备及存储介质,包括:采集课堂中的多模态数据,多模态数据包括语音信息、表情信息和姿态信息;计算语音信息对应的第一信息熵变化率,在第一信息熵变化率超过预设的第一变化率阈值时,计算姿态信息对应的第二信息熵变化率,在第二信息熵变化率处于预设的第二变化率阈值区间范围时,根据第一信息熵变化率调整语音信息的投影权重,根据第二信息熵变化率调整姿态信息的投影权重;根据课堂的光线条件调整表情信息的投影权重;基于调整后的投影权重将语音信息序列、表情信息序列和姿态信息序列投影至特征平面,形成互动特征;将互动特征输入至训练完成的卷积神经网络,得到课堂互动分析结果。