协同控制方法、装置、系统、存储介质和程序产品

本发明公开了一种协同控制方法、装置、系统、存储介质和程序产品，包括：预设包含多个视觉指令符号的视觉指令库；提取视觉指令符号的图像特征；将图像特征输入视觉语义编码器进行编码，获得n维视觉语义向量；采集人体的原始EEG信号；提取原始EEG信号的EEG空间特征；将EEG空间特征输入EEG编码器进行编码，获得n维神经响应向量；将n维视觉语义向量和n维神经响应向量映射至共享语义空间；基于n维视觉语义向量和n维神经响应向量进行对比学习和目标优化，获得匹配的视觉‑EEG对向量；基于视觉‑EEG对向量进行指令分类，获取指令概率分布，基于指令概率分布，输出用于控制外部设备的控制指令。本公开解决了脑机接口控制中学习成本高、交互实时性低等问题。