数据自动抓取是指通过应用程序实现整个数据采集流程的自动执行,达到批量的从网页中获取目标数据的目的。随着大数据技术在企业的生产经营中广泛应用,数据采集技术也更加被重视。目前最常用的数据抓取技术是网络爬虫。虽然这种技术功能强大,采集效率高,但是程序编写复杂,并且所有抓取到的网页都需要被系统存储,消耗资源,只适合有编程基础的人群,应用范围受到限制。为了提供更加易于掌握的数据抓取技术,弥补爬虫技术的不足,给更多的企业或个人提供更高效,便捷的数据批量抓取服务,本文决定设计并实现一款基于Selenium的数据自动抓取软件。通过为网页元素生成多种类型的XPath路径表达式,并总结出一套XPath路径表达式的评价标准,实现对网页元素定位方法的优化,帮助软件准确定位到用户指定的目标数据,然后使用软件自定义的脚本语言把用户的数据采集流程以脚本文件的形式保存下来,通过执行脚本文件完成数据的批量采集。最后进行软件测等试相关工作,测试结果表明本软件达到了预期目标。我们希望用户能够利用本文所开发的软件完成任务繁重且单调的批量数据采集工作,既提高工作效率,又能节约宝贵的时间和精力。