摘要
本发明公开了基于多模态脑机接口‑视觉跟踪的多智能体协同控制系统,该系统包括如下模块:信号采集和处理模块,采用8导联脑电帽采集脑电原始数据,选取枕区部位(PO7,PO8,P3,P4,Pz,O1,O2,Oz)做脑电数据采集区域,进行EEG数据采集;特征提取和分类模块:使用时空卷积网络提取SSVEP信号特征,结合集成学习策略优化分类精度,并基于Transformer模型提取EOG信号,集成LMS自适应滤波器结合小波变换对EEG信号进行消噪,扩展了自适应滤波器的频率跟踪范围,最大程度减少信号损失;协同控制策略设计模块:将脑电信号映射为不同智能体的控制指令,实现无人机和小车的协同控制;目标检测与跟踪模块:基于PP‑YOLOE模型优化无人机视觉追踪系统,实现小车的精准跟踪和自动调整。