网页数据采集和还原系统设计

被引量 : 0次 | 上传用户:honest
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网正在逐渐改变我们的生活,网络带给我们便利的同时,也存在着许多需要我们关注的安全问题。内网用户对外网的访问大部分通过Web浏览器进行。为了实时地了解用户上网的内容,及时地发现用户访问非法和不健康的网页,进而统计内网用户对网络的访问习惯,我们需要对用户浏览的网页进行实时地采集和还原,这是本文的研究目的。在对TCP/IP协议和HTTP协议进行深入分析的基础上,本文首先使用libpcap函数库构建网络数据捕获程序,并采用CLAY下的有限状态机转移技术对数据包进行过滤和分析,完成对网页数据的采集并重组TCP会话;其次,采用MySQL建立自己的数据库用于存储采集数据;然后数据还原模块将数据库中的数据取出并存为本地文件;最后为本地文件中存储的数据创建超链接,从而实现网络链接的本地化和网页的还原。本系统在Linux操作系统下实现,以监听方式对内网用户访问的网页进行采集,并对采集到的网页数据进行了还原。实现了本课题的预期目标。
其他文献
随着社会经济的发展,生活节奏的加快,人们对农产品冷链物流提出了更高的要求。本文分析了我国农产品冷链物流存在的问题,通过借鉴国外发达国家农产品冷链物流发展的成功经验,
通过对俄国大诗人马雅可夫斯基早期 (未来主义时期 )大量的诗歌创作的分析研究后 ,指出马雅可夫斯基的未来主义诗歌体现了作者追求创新与不朽的伟大创作气魄。马雅可夫斯基未
设计在西方发展了百年,而在中国现代设计只有不到二十年的发展时间。因而受诸多因素影响,中国的早期平面设计教学从内容形式到制作方法都过于单调,传统工艺美术型的设计教育
本文从生产实践出发,总结了宝山矿区多年来在生产地质探矿中,运用坑道、探眼、水平岩心钻组合勘探手段的应用条件、工程布置原则及取得的效果。认为以钻代坑,组合勘探能达到
北方冬季时间长,气温低,经常发生果树冻害.为使果树安全过冬,减少损失.根据几年的生产实践,本文从以下几方面论述:1、果树要防冻害的部位;2、.果树冻害的防治措施;3、果树受
文学的空前发展造就了一大批卓越的女性作家,从“文化大革命”刚刚结束、思想解放的初期,到21世纪的今天,张抗抗走过了一条线条分明的道路,从作品中“女奴”情绪的抒发,到女
在俄罗斯的政治文献中,常常把1917年的十月革命称为"政变"。正确区分"革命"和"政变",对正确理解俄罗斯历史发展道路有着非常重要的意义。革命与政变的区别在于,革命是提出和
文章从作业成本法在生产企业应用中存在的问题展开较为深入的分析,并以此为依据,提出提高作业成本法的重视程度、使得作业库划分更加明确、明确作业成本法应用流程的有效措施
ETCS-i电子节气门体(智能电子气门控制系统),一般都是通过加速踏板总成(TPA)来实现驾驶员的意图的,并通过传感器将驾驶员的意图传递给控制电脑。电脑再根据踏板信号来控制节
反义同词指一词兼有相反或相对的两个义项,是词的多义性的一种特例。本文运用认知语言学的概念转喻理论探讨了反义同词的生成机制,并对反义同词中的转喻关系进行了分类。研究