一种基于多模态视频分类模型的交通事故检测方法及系统

本发明属于交通管理和图像处理技术领域，公开了一种基于多模态视频分类模型的交通事故检测方法，包括以下步骤：S1.车辆的检测、跟踪；S2.查找当前帧中的停车车辆；S3.聚类输出停车区域；S4.抠取停车区域ROI图像序列；S5.使用多模态大模型VideoCLIP做视频分类，判断是否发生事故。还公开了一种基于多模态视频分类模型的交通事故检测系统，包括视频流获取单元、交通事故检测单元、报警单元和事件检索及查询单元。本发明运算速度快，其第一步是通过停车判断是否存在潜在事故，能够精准定位潜在事故区域，减轻后续视频分类网络计算压力；鲁棒性更好，可利用文本信息的先验，缓解视频训练样本不足导致的模型泛化性差的问题。