基于文本挖掘的学术文献内容智能识别方法研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:zhouqjj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为人工智能领域的前沿课题之一,文本挖掘(Text Mining)是以文本数据为研究对象,以数理统计分析为理论基础,结合机器学习与自然语言处理等相关方法,提取文本隐含信息以及知识的计算机处理技术。为解决传统人力分析方法在处理规模化学术文档集时效率低下的问题,本文以切割布局问题(Cutting and Packing Problem,C&P)学术文献为研究对象,旨在结合文本挖掘与机器学习相关方法,实现该类文献内容类别的智能化解析及识别,从而为规模化学术文档集的分析和处理提供更加高效的途径。主要研究工作包括以下几个方面:(1)根据本文的研究对象和研究目标,研究了 C&P问题的基本概念和该类学术文献的主要内容类别,并以国际主流运筹学期刊为数据来源,建立了文档数据集,作为本文算法模型的测试对象。(2)基于Python编程语言及其第三方库,构建了包括文档格式的转换、文本数据降噪、文本切分、停用词去除、词性标注以及词干提取等步骤在内的文本数据预处理流程。(3)对比经典特征提取方法,选择并建立了基于人工神经网络(ANN)的文本特征提取模型。主要包括样本训练数据的生成、全连接神经网络的设计、卷积核数量和大小的确定、池化操作的选择、模型超参数的设置和可视化处理、训练算法的实现。(4)为解决全局式智能解析算法识别效率低下的问题,提出了分步识别方法:首先,采用基于文本排序算法的关键信息提取,缩减目标文档的数据规模;其次,采用基于编辑距离的模糊识别算法对所提取的关键信息进行搜索匹配,从而实现了学术文献内容的智能化解析和识别。(5)基于整体研究方案搭建了学术文献智能挖掘原型系统,实现了主要流程的模块化、集成化以及自动化。为验证所提方法的有效性,对文档数据集进行了规模化测试,并采用分类模型评价体系分析了测试结果。结果表明,本文所提方法主要性能指标均能取得较好结果,综合可接受度为81.19%,说明本文对相关研究及应用具有一定的参考意义。
其他文献
一直以来,各种细菌病毒时刻威胁着人类的健康。随着科技的日益进步,人们对于环境卫生的要求进一步提高,抗菌材料在生活中的应用显得尤为重要。MOFs材料ZIF-8的中心金属离子Zn2+可以起到抗菌的作用,使材料具有一定的抗菌性能,但是效果并不理想,因此未能被实际应用于生产生活中。本文利用掺杂Ag-TiO_2的方式改善ZIF-8的抗菌性能。首先,利用溶胶-凝胶法结合程序升温方式,制备Ag-TiO_2二元复
<正>1我国传统节日旅游产品类型1.1传统宗教节日的旅游产品过去人们参观以寺庙为代表的宗教景点的目的主要有:降香拜神、掷抽签、观光寺貌、参观寺藏、观戏买物、品茶闲话等
目的探讨EB病毒(Epstein-barr virus)感染在儿童腺样体肥大发病机制中的作用。方法采用荧光定量PCR技术对51例急、慢性腺样体肥大患儿的血浆标本进行EB病毒DNA定量检测,同时
<正>第一部分:开题报告一、选题的研究背景实验作为化学学科最基础的一部分,我国著名的化学家戴安邦先生说到:"全面实施化学教育教学的最有效的一种形式就是化学实验教学。"
会议
“大学观”是人们对于大学的基本看法或观点,是人们基于自身经验所形成的对大学的认识和理解,细化为对大学学习、大学生活、大学人际关系及大学教育的整体认识和理解。近年来,高中教育与大学教育间的衔接问题日益凸显,如何解决在衔接阶段教育质量的保障、学生的迷茫心态、学生的适应性等问题已经成为教育发展过程中亟待解决的瓶颈。对于即将跨入大学校园的中学生来说,这项研究能使他们对大学生活以及入学后可能会遇到的困难有所
本文依托担任《强军》等重大主题军事电视专题片配音的实践成果,从理性思辨层面论述了解说词配音在表达主题、丰富内涵、营造语境、提高感染力与渗透效应等方面发挥的重要作
【正】 一、让渠道卖好卖的产品 NC产品好用与否的关键在于定制化与差异化。京东方认识到NC和PC最大的不同在于NC是为客户的某种特定应用专门定制的系统;只有为客户定制,满足
财务评价是根据国家现行财税制度和价格体系,分析、计算项目直接发生的财务效益和费用,编制财务报表,计算评价指标,考察项目盈利能力、清偿能力以及外汇平衡等财务状况,据以
钢筋混凝土柱-钢梁组合结构(Reinforced concrete column-steel beam composite structure),简称RCS组合结构,其梁柱采用不同材料,充分发挥了混凝土受压性能好和钢材强度高的优点,在选材上具有合理性和经济性,RCS组合结构是今后高层建筑、大跨度建筑发展的趋势。RCS组合节点是组合结构的关键传力部件,我国目前对RCS组合节点的研究和应用较少,对其工
金融业的稳步发展离不开金融监管的支持与保障,而相对于西方金融监管的发展历史,我国的金融监管相对起步较晚,仍存在诸多有待完善的不足之处。通过对西方金融监管的讨论和分