一种多模态输入的婴儿意图识别方法及装置

本发明公开了一种多模态输入的婴儿意图识别方法及装置，包括：获取含有婴儿全身的视频数据及对应的婴儿啼哭数据；将含有婴儿全身的视频数据及对应的婴儿啼哭数据输入婴儿意图识别模型中，对婴儿意图进行识别；本发明同步采集视频和音频信息，同时使用婴儿面部表情、肢体动作、啼哭声音作为输入，使用深度神经网络进行端到端预测婴儿意图，准确率得到了提升。