基于多模态面部特征融合的康养陪伴机器人

本申请涉及康养机器人领域，其具体地公开了一种基于多模态面部特征融合的康养陪伴机器人，其通过获取老年对象面部表情视频流，并进行精细化的预处理，进而捕捉面部各区域的细微特征，之后对面部各区域的细微特征智能地识别并赋予面部微表情更高的权重。随后捕捉表情的时间动态，结合时间注意力模块，进一步聚焦于表情变化的关键时刻和模式，从而生成更准确的最终情绪向量。最终，基于此情绪向量为机器人生成恰当的动作指令，从而克服传统方法对单一宏表情的依赖和对矛盾信号的忽略，实现对老年用户情感状态的精准、无歧义理解与响应。