摘要
本申请提供了一种基于深度学习的协同共育质量智能评估系统及方法,基于跨模态注意力机制构建教师的行为特征向量与家长的语音情感特征的模态关联矩阵,进而使用模态关联矩阵对教师行为与家长语音之间的协同关系进行联合建模,得到家庭场景评分与幼儿园场景评分之间的反馈关联信息;依据幼儿的响应特征向量和社区活动的时间标签特征确定社区场景评分与幼儿园场景评分之间的跨场景时序协同度;根据反馈关联信息和跨场景时序协同度构造各个协同场景中质量评分的特征拼接向量,通过各个特征拼接向量和不同协同场景之间质量评分的拼接损失对各个协同场景下的质量评分进行融合评估。基于上述方案可实现幼儿园、家庭和社区中质量评分的多模态协同融合。