摘要
本发明公开了一种基于大数据分析的AI模型性能评价方法及系统,涉及大数据分析技术领域,包括,针对目标AI模型获取任务文本数据,通过嵌入模型进行分词处理输出文本向量,使用UMAP算法对任务向量进行降维并聚类计算得到任务簇,计算任务文本向量间的余弦相似度构建任务图谱,并使用图神经网络提取任务风险评分。本发明所述方法通过利用图卷积的层次性来强化每个任务的风险评估,使得风险评分更加准确可靠,为后续的任务管理和优化提供了优先级参考,RL算法基于奖励机制不断优化生成策略,使得提示模板能够更好地符合任务目标,提高任务执行质量,通过生成对抗网络生成多个高质量的优化提示模板,确保在不同任务场景下的执行质量。