基于主题模型的协同文本分类方法研究

来源 :山东工商学院 | 被引量 : 0次 | 上传用户:ahehehehehe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文本分类是自然语言处理领域中的一项基础任务,在舆情分析、邮件过滤、问答系统、智能信息推荐等应用场景中具有重要的意义。传统的文本分类方法需要分布均匀且标注完全的训练数据。而在实际应用中,随着互联网上的文本数据及资源爆发式增长,文本数据逐渐呈现出载体形式多样、标注数据匮乏、类别分布不均衡等特性,给传统的文本分类技术带来了巨大的挑战。针对文本数据类别分布不均衡和标注数据匮乏,导致文本分类精度低的问题,本文结合文本表示和数据采样的方法开展半监督学习的研究,重点研究了协同文本分类方法,旨在提高半监督文本分类模型的性能。主要研究内容包括:(1)本文利用VSM向量空间模型、LDA主题模型以及SLDA主题模型,分别生成了不同的文本特征视图。旨在通过提高协同训练视图之间的差异性,来改进协同训练文本分类模型。(2)针对半监督学习在类别分布不均衡场景下分类精度低的问题,本文提出一种基于后验概率的未标注样本置信度计算方法,并运用基于类别的采样策略,来选择合适的未标注样本加入到模型的训练中。(3)在上述研究的基础上,本文提出一种融合SLDA有监督主题模型的协同文本co-STM分类算法。该算法利用SLDA模型能识别主题与类别之间的语义关系,建立起主题与类别的映射,能显著提高了co-STM模型的分类性能。(4)为了验证co-STM模型的有效性,本文分别在20Newsgroups数据集和Amazon多领域通用数据集构造不同倾斜程度的不平衡数据子集,将co-STM模型与其它模型在该数据子集上进行了大量的对比实验。实验结果验证了co-STM分类模型能够提高不平衡数据下的半监督分类精度。
其他文献
随着世界各国对核心素养的关注,在中学化学学科核心素养的培养与实施过程中,对中学化学衔接教学的要求也越来越丰富。本研究在化学核心素养的基础上,从化学课程标准出发探究初高中化学衔接教学对核心素养发展的影响,从衔接教学角度,将初高中化学教学内容深刻化,提高化学课堂教学效率,对于培养和提升学生核心素养水平,具有重要的理论意义与实践意义。本文主要基于教学实践,对初高中化学衔接教学促进高一学生“宏观辨识与微观
文化史汇聚了人类大量的辉煌文明成果,对构建学生完整的知识体系,提高人文素养有着比较重要的意义。随着课改进程的不断延伸,新课标对教育理念、教学方法等方面有了更高的要求,提出了以“发展学生核心素养”的教育指导思想。这一理念提出后,高考命题取向也发生了较大转变,由“能力立意”上升为“学科素养立意”。在新课标背景下,高中历史教师如何适应并构筑高效的文化史课堂,促进学生提升历史学科核心素养是一个比较紧迫而有
阅读可以分成精读和略读两种,精读是学习,略读是实践。略读能力的培养,需要学生进行积极的思维和从大量的文字中提取重要的信息。而运用思维导图进行略读教学,可将重要的内容“梳理”和“浓缩”成直观的图示,可以有效地帮助中小学生建立起完整的知识框架系统,从而培养学生的阅读积极性,真正起到快速地阅读,自主学习,提取信息的效果。思维导图(mind map)是一种解放思维的图文工具。近年来,人们在日常生活和工作实
目前,作者在农村小学担任小学英语教师。在授课过程中,作者发现掌握单词对小学生英语学习非常重要。就现行的小学英语课程标准而言,单词在课堂讲解上占据很大比重。但还是有很多学生在单词上面存在很多问题,尤其体现在小学英语检测中判断发音,单词拼读和拼写的错误。因此针对这种现象,笔者尝试采用新的教学方法帮助孩子有音形义的意识。自然拼读法是目前英语为母语国家最为推广的教学方法,主要是为了让学生学习单词拼读和拼写
2010年中共中央和国务院印发的《国家中长期教育改革和发展规划纲要(2010-2020)》、2014年教育部研制印发《关于全面深化课程改革落实立德树人根本任务的意见》以及2016年提出的《中国学生发展核心素养》等文件中,都对国际理解教育提出了一定的要求。本研究以小学三年级“小风筝·大世界”单元为个案,通过探索国际理解教育的基本理论,进行小学综合实践活动国际理解教育主题单元课程的开发。本研究共包括四
小学科学课程是一门以培养学生科学素养为宗旨的义务教育阶段的核心课程,在小学课程设置中与其他主要学科一样,具有十分重要的位置。但是,在课程教学过程中,小学科学面临诸多难题:1)小学科学课程是一门综合性课程,涵盖物质科学、生命科学、地球和宇宙科学,以及技术与工程四个领域,对任课教师的综合素质要求极高;2)小学科学课程是一门实践性课程,科学探究活动课程居多,课堂管理难度大;3)现有教师专任化程度不够,教
本文针对小学英语教学中重语言、轻文化教学的现状,选取彬州市Y小学作为研究对象,开展小学英语教学中文化意识培养情况研究,分析小学英语教学中文化意识培养现状和问题,并提出相应对策建议,期待能够为小学英语教学中改进和提升英语文化意识提供借鉴参考。本文在前人研究分析的基础上,对文化意识以及英语教学中的文化意识培养的概念进行界定,对语言与文化关系理论、跨文化交际学理论、克拉申“可理解的输入和“情感过滤假说”
当下的教学还存在以知识为本、灌输为主,停留在浅层学习上的现象。为适应教育改革的要求,落实立德树人根本任务,培养学生适应终身发展和社会发展需要的必备品格和关键能力,必须实施素养为本的教学。《普通高中化学课程标准(2017版)》将化学学科核心素养凝练为五个维度,“宏观辨识与微观探析”即为五个维度之一,具有鲜明的化学学科特点。调查发现,升入高三的学生其“宏观辨识与微观探析”素养仅达水平1和水平2,如何提
单元复习课作为化学学习的一种重要课型,目前教学中仍存在复习方式单一化、复习效率低下、学生的学习多处于浅层学习状态的现象。为迎合新时代培养创新型人才的要求、基础教育改革的需要和推动教育信息化发展的任务安排,单元复习课的教学应以深度学习理念为指导,转变传统的教学方式,不断促进学生由浅层学习向深度学习的转化。深度学习理念强调学生高阶思维能力的发展,迎合教育本质和时代发展要求,是落实核心素养的途径之一。因
当前教育信息化改革中,信息技术与学科教学的深度融合是教育改革的一个重要组成部分。整合技术的学科教学知识(TPACK)作为信息时代教师的必备知识框架,成为了学者们争相研究的热点。本研究首先以TPACK组成元素为理论框架编制调查问卷,对凯里市255名小学数学教师进行问卷调查,了解凯里市小学数学教师的TPACK的现状;其次,选取TPACK框架中技术元素(TK)以及与技术相关的三个元素(TCK、TPK、T