摘要
本发明公开了一种多模态协同安全监测方法、装置、设备及存储介质,涉及计算机视觉与传感器融合技术领域,该方法包括:采集监测区域的多模态数据,多模态数据包括图像数据、红外温度数据和环境参数数据;基于目标检测模型,对图像数据中的人员安全特征和环境安全特征进行检测,输出视觉识别结果及视觉识别置信度;当视觉识别置信度低于预设阈值,且多模态数据的一致性满足同步条件时,结合红外温度数据和环境参数数据,采用加权融合进行多模态数据的关联验证二次识别目标,以输出多模态融合置信度。本申请通过视觉识别与多传感器融合技术的结合,提升复杂工业环境下人员及环境安全识别的准确性与鲁棒性。