随着计算机网络规模的不断壮大,针对网络漏洞和安全缺陷的网络攻击方式日趋复杂,经典安全防御技术已不能有效的保护网络。动态地检测入侵和攻击成为了保障网络安全的重要手段,网络数据包捕获和分析技术则是其中的关键。对捕获到的数据包进行解码分析,可以有效地监控网络的运行状态,准确定位网络中出现的故障,是进一步对网络中存在的攻击行为采取适当处理措施的基础步骤。现有的技术虽然可以解决数据包的捕获与存储问题,但是它们在数据包分析方面却表现不佳,提供的安全分析功能比较单一,例如Wireshark,网络抓包工具,主要进行局域网协议解析,没有网络状态分析功能;Snort,入侵检测系统,仅提供网络异常入侵检测。这些工具都只针对某个特定的领域研究,提供的有价值的信息比较有限,不能满足网络安全分析的需求。本文提出了一种针对Pcap格式的网络数据分析检测技术,并基于Apache Pig开发了一款新型的网络安全分析系统Pcap-Pig,通过集成数据包解码技术、入侵检测技术、指纹识别技术以及协议分析技术等多种技术对网络数据进行综合分析,该系统可以同时提供网络安全分析与入侵检测等多种功能。在本论文的最后,并以Pig本地执行模式对所设计的系统进行了功能测试与验证。实验结果表明,该系统不仅可以实现Wireshark特性的基本数据包分析功能,如数据包计数、流量统计、协议分析等,而且集成开源工具Snort、POf,能够完成更深层次的安全分析,如入侵检测、被动式操作系统检测等。更重要的是,本系统是基于Apache Pig平台设计的,它具有很好的可扩展性,针对当前网络捕获的数据包可以实现一套比较全面的分析框架,给安全分析人员提供完整的与攻击相关的上下文。