分布式集群数据生产系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
分布式集群数据生产系统
申请号:CN202410941773
申请日期:2024-07-15
公开号:CN118467187B
公开日期:2024-09-17
类型:发明专利
摘要
本发明涉及分布式集群技术领域,特别涉及分布式集群数据生产系统,包括:数据接收模块,用于接收n个提交数据,提交数据包括提交APP信息与任务类型数据,任务类型数据包括请求内容与多媒体数据;第一数据处理模块,用于将提交APP信息与请求内容输入训练完成的任务识别模型,获得第n个提交信息对应的信息类型,节点服务器的类型与信息类型一一对应;第二数据处理模块,将第n个请求内容与多媒体数据输入训练完成的处理时间预测模型中,获得第n个提交信息对应的预测处理时间;处理时间预测模型与信息类型一一对应;基于处理时间预测的节点选择和任务分配方法能更有效地提高任务处理效率。
技术关键词
分布式集群数据 时间预测模型 节点 资源评估模型 资源特征 数据处理模块 朴素贝叶斯模型 多媒体 支持向量机模型 识别特征 构建分类器 硬盘 服务器 分布式集群技术 数据接收模块 内存 任务分配方法