一种基于爬虫的BBS数据获取与分析框架设计

来源 :中国计算机用户协会网络应用分会2008年网络新技术与应用研讨会 | 被引量 : 0次 | 上传用户:guodlleon
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来网络安全问题日益严重,针对BBS数据的安全监管成为一个重要的应用需求。而获取BBS上的各种数据并加以过滤、分析则是BBS数据监管关键技术。针对这一问题,提出了一种基于爬虫的BBS数据获取与分析框架,并设计实现了一个系统原型。实验系统能够有效地获取BBS上的数据内容,并根据要求进行分类,把获得的数据存储在数据库中为其他应用提供数据。实验结果表明本文提出的框架可行、有效。
其他文献
通县放射工作人员外照射个人剂量水平分析王新明刘胜英张克仪(北京市通县卫生防疫站,通县101100)为进一步提高放射工作人员的健康水平和放射卫生综合监督管理水平,加强放射防护工作,我们
简要介绍虚拟现实技术,重点阐述基于VRML的虚拟环境中的交互技术。分析通过结合利用JavaScript脚本语言,扩展人机交互功能。
供配电系统可以说是人们日常生活中不可缺少的一部分,人们的生活水平有了明显的提升,在住宅或者工作中也出现了众多的电器,并且如果供配电系统出现问题,那么就会给人们的生活及工
目前生产氮是气的主要生产方法有,低温精馏法、变压吸附法、膜分离法、空气燃烧脱氧法等,以上几种技术已经成熟,也装备了相应的设备。低温精馏是大量生产高纯度氮气,同时生产少量
近年来,煤矿安全事故多发,中国作为全世界最大的煤炭生产国,在生产煤炭时,必须要在遵循安全和可持续发展的原则的基础上,再关注煤炭的产量和经济利益,否则不利于社会的安定团结。但
结构工程网格是面向结构工程领域的网格应用,信息服务是其中的关键组件之一。对结构工程网格中信息服务的实现基础MDS4以及它所遵循的WSRF规范进行了深入的研究并对结构工程网
Ruby on Rails是近两年被迅速推广应用的Web应用开发框架。介绍了Ruby语言的特点,基于Ruby语言的Ruby on Rails框架的特点、结构、主要部件,分析了邮件地址簿的结构,讨论了存储
近年来,随着我国城市化程度的不断加快,城市规划中大型商业综合体的规划建设越来越常见。而大型商业综合体由于其建筑本身的特性,建筑群体的密集型,以及多类型建筑的复杂性等,也对