基于语义引导的短视频假新闻自适应检测方法

本发明基于语义引导的短视频假新闻自适应检测方法，通过对视频中的视觉、文本、音频、情感多个模态特征进行建模获得不同模态的原始表示，通过语义验证模块在基于文本模态条件下对不同模态的原始表示进行差异语义分析，通过可区分语义编码模块利用差异语义增强编码原有模态语义的可区分特征，提高不同类别视频的多模态特征差异，通过边界分析模块根据获得的多模态可区分特征分析不同模态的分类边界，利用可学习向量作为各个模态的分类边界，依据多模态的分类边界，边界聚合模块对多模态边界计算多层次的特征聚合，获得对于视频的真假分类标签。本发明不仅分析真假短视频的多模态表示差异，还提供类别平衡的假新闻短视频的分类方法。