基于多模态与会话状态感知的实时话术决策方法及系统

本发明提供了一种基于多模态与会话状态感知的实时话术决策方法及系统，旨在解决现有技术实时性差、策略性弱的问题。该方法包括：获取用户与坐席之间的实时对话数据，并行提取并融合多模态特征信息为结构化的对话状态特征；将结构化的对话状态特征与预定义的对话流程模型进行实时匹配，确定当前对话状态；基于当前对话状态和预设条件，触发辅助策略以生成辅助信息、记录坐席对辅助信息的采纳情况，并以非干扰方式将辅助信息推送给坐席；收集全量对话数据及业务结果，通过机器学习对模型和策略进行闭环优化。本申请能实现精准感知、实时干预与个性化辅助，具备自我进化能力，提升沟通效率与业务转化率。