AJAX(Asynchronous JavaScript and XML)技术可以动态地改变页面内容,是Web2.0应用中通常采用的技术。网页内容的延迟加载在提高用户界面交互程度的同时,也大幅度增加了网络爬虫程序的页面提取难度。因此,分析JavaScript代码并抓取页面中的异步传输内容成为当前网络爬虫技术的研究课题。聚焦网络爬虫根据目标描述有选择地访问从网页中分析出的URL,当用户需求的数据模型包含多个网页时,聚焦网络爬虫应能够获得这些网页并快速准确地构建数据模型。本文采用基于协议驱动与事件驱动的综合聚焦爬行算法和基于易扩展向量模型的目标描述,实现多层网页关联聚焦爬行。主要工作包括:1、提出了多层网页关联聚焦爬行模型,根据用户预设的网页层和最优爬行路径,通过在地址模型中增加关联语义的方法,达到快速准确获得数据模型的目的,实现多层网页关联聚焦爬行。2、提出了易扩展向量模型,用于聚焦爬虫的目标描述,不仅可以方便地实现增加和删除目标网站,而且能够快速地获得当前网页所在层的相关目标描述,有效地配合多层网页关联聚焦爬行算法的实现。3、提出了基于协议驱动与事件驱动的综合聚焦爬虫框架,详细设计了协议驱动模块、事件驱动模块、协同模块和通用模块的基本功能,重点研究了事件驱动模块获取异步传输内容时涉及的相关模型和定义。4、设计并实现了基于协议驱动与事件驱动的综合聚焦爬虫原型系统,针对新浪新闻评论数据,在综合聚焦爬虫框架中,使用易扩展向量模型实现二层网页关联聚焦爬行。