论文部分内容阅读
针对目前重复数据处理技术的低效性和不可靠性，本文提出了一种基于MD5算法和布鲁姆过滤器的重复数据删除算法。新算法采用两级布鲁姆过滤器并有效结合MDS算法的方式，在发挥布鲁姆过滤器空间效率的同时汲取了MD5算法的可靠性，使得文件级别和数据块级别的重复数据删除策略交替工作。测试分析表明，新算法性能稳定并且实现了高效且可靠的重复数据删除功能。