基于众包的数据标注系统

被引量 : 13次 | 上传用户:zhj8028
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
众所周知自然语言处理和情感分析是机器学习中非常重要的一个环节。而这两个环节都需要大量的数据作为分析的基础。但目前大部分的数据都是直接从网上获取的,质量参差不齐,于是就需要对这些数据进行标注和处理,才能在科研中使用。不过从网上获取的数据量非常庞大,如果光靠科研人员来对数据进行标注,那么工作量就非常之大。然而近年来随着互联网的进一步发展,几乎每一个人每天或多或少都会上网浏览各种网站信息。而且,由于每个人兴趣爱好的不同那么他们所擅长的领域必然也有相应的区别。如果能充分利用每个人的知识,来对互联网上大量的数据进行标注和点评,以众包的形式进行工作。那么就能够使得研究人员更方便的获取有价值的语料信息,更方便科研人员进行语料分析和开展机器学习的研究。该项目就是基于这个需求开展的,提供了一个让用户进行信息浏览,标注,点评的平台。同时,在用户标注和评论信息的时候,也通过数据挖掘和机器学习的算法来实现根据用户的不同个性为他们推荐不同的数据,这样就方便了用户标注和评论。本文在阅读和详细了解了众包的相关资料和国内外使用的情况下,提出了使用众包这种商业模式来解决机器学习中大量语料需要标注的难题。根据系统的需求和网站开发的相关要求并且结合Web开发的相关技术提出了面向本平台的解决方案。此系统采用J2ee作为开发技术,选用Mysql作为后台数据库,Tomcat作为服务器,同时利用最新的Bootstrap和Ajax技术来实现页面的开发和相关可视化特效,使该系统更加美观易用。通过对系统的需求进行分析和设计,本人独立完成了这个系统的整个开发过程,以及相关文档的编写和测试的工作。目前该系统已经完成了测试,所有测试结果都符合要求,已经可以投入使用。
其他文献
随着人们生活水平的提高及生活方式的改变,近些年来,糖尿病的发病率正日益升高,目前已成为继心血管疾病和恶性肿瘤疾病之后死亡率最高的一类疾病。关注糖尿病的发病原因及诊
面对风格多样又缺失知识体系的音乐欣赏教材,如何提高音乐欣赏课的实效,提升学生音乐欣赏能力,是摆在我们面前的课题。也正因为如此,音乐欣赏课越来越受到教师的重视。以2010
本文简要分析了引起金属腐蚀的主要因素 ,提出了在差动汇流环制造工艺中采取的相应措施 ,实践证明 ,方法简单有效。
<正>近年来,在医疗机构发生的医药产品回扣案件中,由于案情复杂、手段迥异、主体模糊,在具体实践当中,人们对此类案件的定性仍存有争议。纪检监察机关在查处医疗机构收受医药
<正>计量安全防护是职业健康安全管理的一个分支,是职业健康安全在计量技术服务领域的应用。20世纪80年代后期,国际上兴起了职业健康安全管理体系。它是一套系统化、程序化和
中国作家莫言在其被称为诺贝尔讲演的《讲故事的人》一文中,以自己独特的方式展示了自己的成长经历、文学创作及制度与个人的种种问题。文章由一系列故事组成,其第一部分的主
本文通过实证分析,发现我国棉花期货价格与现货价格之间存在长期均衡关系,期货价格引导现货价格的形成,为防止棉花价格大幅度波动,建议政府引导棉花市场主体充分利用期货价格
随着石油和黄金价格的不断上升,作为最有影响力的实物资产和货币,石油、美元和黄金的关系就愈发重要。本文以国际原油价格、黄金价格、美元指数为研究对象,运用误差修正模型
对成长中期以前科技型中小企业的支持与孵化,始终是各方关注的焦点,已经构成为各个经济体能否保持持续竞争力的根本所在。在这方面,创业投资和创业板市场大有作为。
近年来,公司治理与股价波动特性以及市场同涨同跌的同步性之间的联系,成为一个迅速发展的研究课题。公司治理的强度影响公司的信息透明度,也影响市场套利交易者对公司股票的