基于Transformer技术的隧道多模态信息处理及预测方法

本发明提供一种基于Transformer技术的隧道多模态信息处理及预测方法，该方法包括：步骤S1：获取隧道及车辆的多种传感器数据；步骤S2：根据传感器数据构建车辆复合特征；步骤S3：将复合特征合成为相应的一维数据序列并进行一维卷积处理，将处理结果分别输入对应的多个多层感知器中以得到复合特征权值，根据复合特征权值得到加权特征，将各个一维数据序列的卷积处理结果添加位置信息后进行跨模态融合，对跨模态融合结果进行投影变换后得到对应的单模态特征；步骤S4：使用加权特征对单模态特征进行加权，并将加权结果输入构建好的Transformer模型中，得到隧道风险预测结果。本发明具有预测准确率高、效率高的优点。