多粒度注意力与特征分布校准的双模态情感识别方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
多粒度注意力与特征分布校准的双模态情感识别方法
申请号:CN202410985750
申请日期:2024-07-23
公开号:CN119128617A
公开日期:2024-12-13
类型:发明专利
摘要
本发明公开了多粒度注意力与特征分布校准的双模态情感识别方法,步骤如下:步骤1、获取样本集;步骤2、搭建MGA‑FDC模型;步骤3、用训练集中数据片段训练MGA‑FDC模型,得到训练好的MGA‑FDC模型;步骤4、用测试集中的数据片段对训练好的MGA‑FDC模型测试,得到情感识别模型;步骤5、将待识别样本输入到上述情感识别模型即可进行该待识别样本的EEG信号以及图像样本情感识别。本申请搭建的MGA‑FDC模型在相较于目前方法具有最优的性能表现,可以更为有效地完成基于EEG信号和人脸图像的双模态情感识别任务,对于实际应用而言更具有现实意义。
技术关键词
情感识别方法 模态特征 情感识别模型 人脸图像特征 注意力 信号特征 校准 卷积长短期记忆 输出特征 卷积模块 样本 情感类别 全局平均池化 分类器 代表 人脸图像数据 双模态