一种自动驾驶限速标识多模态检测识别系统及方法

本公开提供了一种自动驾驶限速标识多模态检测识别系统及方法，涉及自动驾驶环境感知技术领域，包括：获取环境图像、环境点云数据以及车辆运行数据；利用预处理后的环境图像进行轻量化粗检测，将环境图像输入至改进YOLOv8‑tiny模型，输出得到限速标识候选区域；基于候选区域进行多特征精细识别，将数字区域图像输入至STN‑CRNN网络，输出得到数字视觉特征；对预处理后的环境点云数据进行关键点云区域截取，基于密度聚类算法对关键点云集进行聚类，得到目标簇，提取目标簇的点云模态综合特征；利用车辆运行数据识别当前路段ID，提取当前路段的地图模态特征；将数字视觉特征、点云模态综合特征以及地图模态特征进行动态加权融合，最终输出限速信息。