摘要
本发明公开了一种多模态配网带电作业知识检索方法及系统,该方法包括:获取目标配网带电作业数据;基于Chinese CLIP模型构建初始向量嵌入模型,并基于目标配网带电作业数据对初始向量嵌入模型进行训练,得到目标向量嵌入模型;将目标配网带电作业数据输入目标向量嵌入模型进行向量化嵌入得到每一图像对应的图像向量和每一文本对应的文本向量,并将图像向量和文本向量进行存储,得到知识检索数据库;获取配网带电作业查询数据,基于知识检索数据库对配网带电作业查询数据进行跨模态检索,得到配网带电作业查询数据对应的跨模态向量,并将跨模态向量转换为对应的模态数据。本发明能够实现多模态信息的高效联合查询。