一种多模态数据跨模态匹配方法、系统、设备及介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种多模态数据跨模态匹配方法、系统、设备及介质
申请号:CN202510623704
申请日期:2025-05-15
公开号:CN120123788A
公开日期:2025-06-10
类型:发明专利
摘要
本申请公开了一种多模态数据跨模态匹配方法、系统、设备及介质,本方法通过获取目标数据;将目标数据输入至预设的跨模态匹配模型,得到跨模态匹配模型输出的匹配结果;跨模态匹配模型的训练过程包括:获取模型训练集;将模型训练集输入至初始跨模态匹配模型进行训练,得到初始匹配结果;根据初始匹配结果计算模型训练集中每一多模态匹配样本对的训练损失值;基于各训练损失值,对模型训练集中每一多模态匹配样本对进行相关度标签矫正,得到正样本和负样本;根据正样本和负样本优化初始跨模态匹配模型,直至得到训练完成的跨模态匹配模型,能够兼容弱对齐数据和动态调节模态间信息权重,以提升复杂应用环境下的跨模态匹配精度与系统稳定性。
技术关键词
跨模态匹配方法 样本 多模态 训练集 标签 文本 计算机可执行指令 矫正 图像 跨模态数据 变分贝叶斯 高斯混合模型 因子 噪声 可读存储介质 处理器通信