一种基于分布式架构的数据存储方法及系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于分布式架构的数据存储方法及系统
申请号:CN202411039536
申请日期:2024-07-31
公开号:CN118568778A
公开日期:2024-08-30
类型:发明专利
摘要
一种基于分布式架构的数据存储方法及系统,其特征在于,包括将系统划分为多个独立的微服务;选择HBase分布式数据库;根据数据的特征进行水平分片,将数据均匀分布到不同的节点上,自动调整分片策略,引入机器学习算法预测未来的数据增长和访问模式,提前进行分片调整;引入异步复制机制,对存储的数据进行压缩,根据数据的访问频率将数据分为热数据和冷数据;在传输和存储过程中,对数据进行加密处理,根据用户角色和权限控制数据的访问。本发明实现数据在各节点间的均匀分布和高效同步,根据数据访问模式和节点负载情况,动态调整数据分片策略,确保系统负载均衡和高效运行。动态管理加密密钥,确保数据在传输和存储过程中的安全性。
技术关键词
数据存储方法 分布式架构 管理加密密钥 分片策略 哈希算法 混合数据库架构 关系型数据库 节点 分布式密钥 机器学习算法 访问控制策略 数据项 时间序列预测模型 分布式数据库 异步复制 ARIMA模型 数据访问模式
系统为您推荐了相关专利信息
多源异构数据 大数据平台 图谱 数据立方体 参数
数据安全传输系统 非对称加密算法 身份认证模块 生物特征识别 数据完整性校验
分析管理系统 区块链技术 数据安全 数据中心 模块
特征融合网络 火电设备 资源调度策略 深度确定性策略梯度 多源异构数据
时间序列预测方法 情景模型 净化技术 辅助平台 分布式架构