用户产生内容(User Generate Content,UGC)类产品由于其内容自发性和广泛庞大的用户数目而不可避免的成为了淫秽色情、政治敏感、诈骗广告等垃圾信息的重灾区。这不仅仅破坏了用户体验,更严重侵蚀了社会安定和人民健康。尽管各公司对此纷纷构建自己的解决方案,但由于各自为政、受成本和技术的制约,所以不仅力不从心,还造成了资源的极大浪费。可以说,市场和社会都迫切需要更专业强大的反垃圾解决方案。本论文面向UGC类产品,运用先进的敏捷开发模式、应用多种第三方的开源技术和中间件,设计并实现了一个允许多用户同时接入的反垃圾信息处理平台。主要内容和成果概述如下:1.分析并设计了平台功能需求,以及基于可扩展性、通用性和平台性的性能需求。2.设计了具有人工审核、离线和在线机器审核等功能,基于Http协议的分布式反垃圾信息处理平台软件架构和平台网络接口。3.设计实现了基于关键字匹配、高频行为规则识别的垃圾识别技术的业务流程定义,具备“热插拔”能力的组件设计,以及用于垃圾聚类的最小化局部边际的合并聚类算法。4.测试。通过接入UGC类产品“同城约会”,对本平台的主要业务功能进行测试。通过接入20个UGC类产品(总QPS约5-6万),借助服务器监控系统对平台的的平台性进行测试。通过对关键字匹配和高频规则的“热插拔”能力测试了平台的通用可扩展性。测试结果表明,业务功能运行准确,在线业务响应速度在220 ms以内,并且展现了良好的通用可扩展以及平台性能。本文的反垃圾平台开发设计和实现遵循服务化、异步化思想,基于此的测试表明本文的反垃圾平台良好完整实现了需求,是具备平台性、通用性和可扩展性的良好反垃圾解决方案。