由于大数据时代的到来,互联网上存在大量的信息数据,数据的体量结构、获取方式等方面都发生了变化。对于大多数公司,合理使用信息抓取技术从互联网上爬取有价值的数据,进而进行更深入的分析挖掘处理,已经成为当前的热点问题。目前主流的数据采集手段是采用网络爬虫技术,网络爬虫技术虽然功能强大,效率很高,但是程序复杂,普通用户难以理解和使用。同时,随着互联网技术的不断提高,基于Web的应用系统也得到了广泛的发展,人们在通过网页处理在线事务时,经常需要重复执行某些操作,例如企业通过各个互联网招聘平台发送企业招聘信息时,需要不断的将招聘信息填入不同的网页中,这些重复性的操作极大的降低了人们的工作效率。为解决上述问题,设计并实现了基于Selenium的网页自动化操作软件,构建了自定义语法的脚本语言,设计了基于网页元素特征分析的Xpath生成方法和网页中循环元素的智能选取方法。普通用户通过简单的UI操作,就可以方便地生成网页自动化脚本。该自动化脚本不仅可以完成数据的批量采集,还能够实现本地数据的网络推送,从而较大幅度地提高人们的工作效率。