摘要
本发明涉及数据处理技术领域,尤指一种基于分布式存储的云备份平台数据去重方法。包括以下步骤:利用动态分块算法对数据进行自适应分块,生成唯一标识码并提取多维特征信息;通过分布式哈希表建立全局索引,映射数据位置并维护索引一致性;基于深度学习算法进行冗余分析与相似性匹配,执行去重策略;根据访问频率及负载情况,采用分层图划分算法实现数据块的分布式存储;利用强化学习算法动态优化分块策略、索引频率与存储布局,实现性能与资源的全局最优。本发明实现了数据去重的高效性、准确性与动态优化,提升了云备份平台的数据存储与管理效率。