论文部分内容阅读
针对数据规模的扩大，重复记录检测效率往往不能进一步提升的问题，提出一种粒子群优化BP神经网络的重复记录检测方法，充分利用了神经网络的非线性映射和粒子群算法的全局优化特性。将基于学习的思想和进化的思想应用到重复记录检测中，避开了传统方法计算属性权重的问题。理论分析和实验表明：该方法不仅具有好的检测精度，而且具有很好的时间效率，能够有效地解决大数据量的相似重复记录检测问题。