多模态大模型的训练方法、核电厂现场数字化工作监督与指导系统及方法

本申请致力于提供一种多模态大模型的训练方法、核电厂现场数字化工作监督与指导系统及方法，训练方法包括：获取预训练数据库中信息。预训练数据库中信息包括人员信息库、设备信息库、包含规程活动信息和规程内容的规程信息库、以及包含标准操作活动信息的标准活动库；将预训练数据库中信息输入至多模态大模型中进行初始化训练，以获取具有识别标准作业人员活动和设备状态的能力的第一多模态大模型。本申请通过针对核电厂现场工作的独特性，建立合适的训练数据库训练多模态大模型，利用多模态大模型实现核电厂现场数字化工作监督与指导，以解决现有技术无法实现对核电厂现场作业人员活动的实时监督与指导功能的技术问题。