基于改进TFIDF算法的文本分类研究

来源 :计算机与现代化 | 被引量 : 0次 | 上传用户:jica330
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于文本分类在信息检索、邮件过滤、网页分类、个性化推荐等领域有着广泛的应用价值,所以自文本分类的概念提出以来,受到了学者们的广泛关注。在文本分类的研究中,学者们运用了很多方法,其中TFIDF是文档特征权重计算的最常用算法之一,但是传统的TFID算法忽略了特征项在类内和类间的分布,导致很多区分度不大的特征项被赋予了较大的权重。针对传统TFIDF算法的不足,本文在IDF的计算过程中,用词条在类内与类间的文档占比来考虑词条在类内与类间的分布。在实验中,用改进的权重算法表示文本向量,通过考察分类的效果,验证了改进算法的有效性。
其他文献
目前,私营经济占GDP的比重从1979年的不足1%增长到了超过1/3.与之不相适应的是,对私营企业在融资等要素分配方面的待遇不公.融资难的问题已成为制约私营经济发展的关键因素,
要贯彻中央建设和谐社会的战略思想,有必要对我国现行的财政体制进行改革.本文将从制度经济学、产权经济学和博弈论等角度,对我国财政体制中存在的问题及地方财政困难的原因
扶贫开发的主要目的在于带动农村贫困人口脱贫致富,而扶贫人口的自我融入能力是决定扶贫成效的关键因素。针对当前云南省西盟佤族自治县贫困人口在扶贫工作中自我发展能力弱,融
《植病研究法》是植保专业的重要专业课程之一,是植物病理学研究的重要组成部分,也是培养和提高学生对植物病理学实验技能和学习兴趣的一门重要课程。针对目前青岛农业大学《
今天是个难得的好天气:阳光暖暖地栖息在房檐上,戏弄着树枝上那大大小小的新绿;调皮的鸟儿在繁花嫩叶中欢快地鸣叫,弄落了一地的花瓣。好不容易完成了双休日作业,便随母亲一同
中国经济社会的发展要求中国的对外开放从沿海开放向沿边开放扩展,西南"桥头堡"建设即是这一发展趋势的回应。面向西南开放的"桥头堡"战略突出了云南在对外开放中的前沿性、
论述了是化学与科学人文精神之间的关系、化学中人文精神的内涵,建议应该在基础、专业、特色行动三个层次上开展中学化学人文精神的教育。
叶圣陶先生说:“在作文教学中,首先要求学生说老实话,决不容许口是心非,弄虚作假。”说真话、写真事、抒真情,这是作文教学的生命。作为老师,就是要引导学生观察生活、感受生活、抒
期刊
<正>《数学教学参考书》是给数学教师教学作为"参考"之用的,其权威价值与指导意义是不容置疑的,可是,其中课堂教学目标的陈述却存在含糊笼统的问题.比如:"常见函数的导数"一