基于Python的网络语料获取和文本提取方法探索

来源 :教育现代化 | 被引量 : 0次 | 上传用户:dc365
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语料库语言学,在一定程度上,随着计算机科学的发展而发展。Python语言因其语法简单、接近自然语言、拥有数以万计的第三方类库,近些年发展迅速,同时深受各领域学者喜爱。Python语言的第三方类库Requests通过几行代码就可获取网页文本信息,同时第三方库BeautifulSoup也仅需数行代码就可从海量文本信息中提取指定信息。使用Python构建语料库,可以明显提高语料库建库效率。本文结合实例,详述基于Python的快速获取语料和文本提取过程。
其他文献
随着信息技术的不断发展,互联网的普及性应用促使各新兴行业迅速崛起,电子商务的诞生与发展逐渐改变了人们传统购物消费方式,尤其是在中国加入WTO以来,全球经济一体化的形成
介绍了我国家具出口情况。2009年,我国外商投资企业和私营企业出口家具几乎各占半壁河山,分别为45.5%t和42.4%,其他类型企业仅占12.1%。分析了影响我国家具出口竞争力的制约
农民增收是关乎我国国计民生的重要问题,受很多因素的影响,在我国农产品市场,流通体系不健全对农民增收有很大的影响。本文对我国农产品流通体系存在的问题及如何阻碍农民增
本文介绍了共享和存档2D和3D产品设计数据的免费查看和发布应用程序eDrawings,并介绍了基于eDrawings实现虚拟交互浏览的应用技术。
新闻舆论监督在社会主义法治建设中发挥了重要作用。本文以"世奢会诉媒体侵权案"为例,阐述了新闻媒体在进行舆论监督活动时,应处理好舆论监督与司法公正、民事侵权的关系,维
进行林下经济作物认证,是保障食品安全的需要,有利于更好地开拓市场、促进农民增收,这也从根本上符合当前提倡的森林可持续发展战略,符合建立和谐林业生产体系的发展目标。对
"一带一路"作为国家战略,引领我们国家对外开放达到前所未有的新高度。城市化、城镇化(urbanization)则是人类历史进程中的全球性社会现象。如果从"点、线、面"的角度考虑,新
利用《辽宁省木材供需状况的实证研究》所得到的辽宁省2001~2010年间木材总供给量和总需求量的结果数据,以及辽宁省各统计年鉴和统计资料公布的统计数据,建立辽宁省木材供需系
财政支出是公共财政的核心内容。财政支出效率是公共财政支出研究的核心问题。文章试图追溯林业公共财政投入效率的研究发展脉络,从林业财政投入效率理论的提出、林业财政投
<正>低碳经济以低能耗、低排放、低污染为基本特征,以应对碳基能源对于气候变暖影响为基本要求,以实现经济社会的可持续发展为基本目的,是适应后工业化社会、实现资源节约和