随着大数据时代的来临,软件系统的安全问题成为人们目前担忧的问题,软件的可靠性和实用性,系统的安全性都是用户使用该系统的前提条件。如何才能实现系统的实时数据传输,负载的均衡调度,系统数据的实时监控,大量数据的存储都是需要解决的问题。为了实现基于分布式的Web漏洞扫描系统,本文运用云计算技术的云端方法实时跟踪数据,运用分布式技术,将开发平台部署在云端,基于Hadoop平台,使用MapReduce技术开发一个基于分布式的Web漏洞扫描系统,对于该管理系统的大数据存储本文采用HBase技术,运用非关系型数据存储,列存储的模式进行数据存储,从而实现数据的高效存储和数据快速处理。本文首先就该课题研究的现状进行了分析,然后就其相关技术进行了简单阐述,之后就该系统的所包含的功能模块进行了详细介绍。在Hadoop平台下该开发系统包括多个功能模块,首先设置不同角色的功能权限,不同用户具有不同的操作权限,根据该系统需求,设计了接入模块(包括不同模块的接口设计等),管理模块(包括角色管理,扫描器管理,任务管理等),监控模块(对于数据的实时跟踪和扫描,数据的统计分析,易于数据的分析和用户决策,对于发现的漏洞及时修复),数据存储模块(适应HBase技术对数据采用列存储模式进行存储)。同时根据负载均衡,设计不同的负载均衡方法,采用不同的任务调度策略,实现任务资源调度的合理,服务器资源的充分利用。该漏洞扫描系统的实现使得开发人员能够及时发现系统漏洞的位置以及漏洞出现的原因,通过告警和邮件发送的方式及时通知用户漏洞所在,使得开发人员及时定位漏洞并进行修复,从而保证系统的安全可靠运行,降低或者避免因漏洞带来的损失。