基于双重深度Q网络的日志异常预测方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于双重深度Q网络的日志异常预测方法
申请号:CN202410837345
申请日期:2024-06-26
公开号:CN118838740A
公开日期:2024-10-25
类型:发明专利
摘要
本发明公开了一种基于双重深度Q网络的日志异常预测方法,步骤1、日志首先通过日志解析算法解析为结构化数据,并利用滑动窗口对日志进行分组;步骤2、基于日志序列可构建马尔可夫决策过程,强化学习智能体能够通过MDP过程提取日志中潜在的知识;步骤3、针对状态空间复杂,动作空间有限且离散的MDP过程,使用面向离散控制任务的深度Q网络训练智能体,最终智能体能够对给定的序列作出异常预测,为了学习日志序列之间复杂的相关性和联系使用了强化学习模型,利用强化学习的优势,通过智能体挖掘日志序列之间的顺序信息、拓扑信息等复杂的关系,使正常序列生成智能体能够生成正常日志序列并提取序列潜在的安全系数。
技术关键词
深度Q网络 日志解析 序列预测模型 训练智能体 模板 滑动窗口 引入经验回放机制 异常状态 日志数据流 更新网络参数 强化学习模型 DQN算法 决策 深度神经网络 生成智能
系统为您推荐了相关专利信息
平衡式吊具 T梁模板 配重块装置 宽度调节机构 智能控制模块
红外跟踪方法 模板 信道 校正模块 交叉注意力机制
文本 数据 生成方法 意图识别 节点
节段梁 数据生成模型 后处理模块 扫描设备 误差
SysML模型 时间自动机模型 检查验证系统 模块 软件工程技术