摘要
本发明公开了一种基于特征调制和跨模态对齐的弱监督图像语义分割方法、系统、设备及存储介质,该方法包括:构建并训练基于特征调制和跨模态对齐的分类网络模型,采用训练后的基于特征调制和跨模态对齐的分类网络模型对处理后的图像标记、类别标记和文本标记处理,得到类别激活图,提取出图像标记和文本标记之间的映射信息加入到类别激活图,得到更加精细的类别激活图,并将更加精细的类别激活图转换成伪标签;构建图像语义分割网络并进行训练,采用伪标签评估模型训练效果,得到训练好的图像语义分割网络模型,并采用训练好的图像语义分割网络模型完成对目标图像的语义分割。本发明能生成准确、边界更加清晰的伪标签,有效提升了模型分割精度。