作为信息学、网络工程学的重要支撑技术,网络爬虫在信息时代的作用日益凸显,它的相关技术发展受到广泛关注。同时,网络爬虫技术也是检索网络敏感信息的主要手段之一,国内外众多的研究者都在研究这一课题。然而随着研究的深入,网络爬虫技术的发展面临着网络中信息形式日趋复杂多样性的挑战。针对这一问题,本文结合主题网络爬虫技术对网络敏感信息检索问题进行研究,主要取得了以下研究成果:1.为了有效实现针对网络中敏感内容的提取,本文在深入研究一般主题网络爬虫模型和网络中敏感信息分布特点的基础上,提出了面向特定主题的网页敏感内容提取技术模型,为针对敏感信息检索的主题网络爬虫技术实现建立了基本框架。2.为了有效利用基于链接分析的主题爬虫技术的计算性能优势以及基于内容分析的主题爬虫技术的检索准确性优势,本文基于现有的爬虫策略,设计实现了基于PageRank策略改进的链接分析技术。3.为了提高主题爬虫技术针对网络敏感信息的检索准确度,实现对网页中敏感信息的检索覆盖面最大化,本文基于DOM树模型提取网页内容技术以及关键词相关性分析技术提出了针对网页敏感内容的综合分析方法。4.本文基于Scrapy开源爬虫框架,设计实现了面向特定主题的网页敏感内容提取技术,并将它应用到具体的敏感信息检索中,进行了相关测试。通过测试分析,验证了本文研究的技术对网页敏感内容检索的有效性。