一种句子级别的中文文本复制检测方法

来源 :杭州电子科技大学学报 | 被引量 : 0次 | 上传用户:ben74
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
该文提出了一种句子级别的中文文本复制检测方法。该方法以句子为基本复制检测单位,运用最长公共子序列算法计算两篇文本之间的重复度,根据所得的重复度值来检测两篇文本是否存在复制现象以及复制的程度。在方法中,剔除句子的其他成分,提取句子中的名词作为句子的文本特征,增加了算法的鲁棒性;建立句子与文档的倒排索引,可快速索引得到存在该句子的所有文档的集合,提高了算法的速度,为大规模文本复制检测提供了一种可行的方法。实验表明,该算法对于普通网页文本复制检测能取得很好效果。
其他文献
唐隐逸文化有以隐求仕的终南捷径、深受佛道影响退隐山林的真正隐士、从山林走向园林别业的"中隐"文化三种不同状态。以隐求仕者属于积极进取的儒家仕宦文化,而真正的隐逸者则
众所周知,高压电柜的电压是很高的,稍不小心就会威胁到人身的安全。尽管在高压电柜附近都有相应的禁止接近的标准,但常常却被人们忽视了,很多时候就会引起安全事故的发生。针对这种情况,可以通过在高压电柜中设计安全报警装置,如果人们进入到危险区域,该装置就能自动实现报警。在目前,较为常用的报警方法是通过微波、激光以及红外线等测距实现报警,但是采用这些方法所需要的仪器的系统极为复杂,而且成本也较高,所以想要得
为了提升家庭基站的无线资源利用效率,适应多业务融合通信的发展需求,设计了一种多业务融合接入的家庭基站系统。分析了家庭基站环境中业务的特点,提出了一种多业务的自适应
摘 要:针对高职院校教育改革中存在的问题,本文提出了课程项目化改革的思路,并以化工设备机械基础课程为例,探讨了如何通过项目化改革,将学科课程模式重新构建为项目课程模式,达到提高教学质量和培养学生职业能力的目的。  关键词:项目化教学 高职高专 教学改革 项目课程  中图分类号:G642 文献标识码:A 文章编号:1673-9795(2012)11(b)-0095-02  Key Words:Pro
论述了基于PLC控制的气动机械手装置的结构、功能、原理及软件编程,详细介绍了气动机械手的过程与控制要求、PLC与器件的逻辑电路连接以及系统的气动原理与工作原理等具体内
分析了直流电机的主要优点,探讨了直流电机控制系统设计的目标与原则,重点对单片微机闭环速度控制电路的设计及相关循环移位算法的使用,进行了深入研究,为实现对直流电机的高效控
该文根据MPEG-4引入的视频对象概念以及对视频对象纹理的编码原理,利用双树复小波变换实现视频图像的纹理分析,将水印嵌入与视频编码结合起来,提出了基于DTCWT和MPEG-4纹理对象的视频水印算法。仿真实验结果表明,该算法使水印和视频对象一起具有灵活多样的存取和随机操作性,对于加性Gaussian噪声、高压缩比的MPEG压缩编码、帧重组和丢帧等攻击具有良好的鲁棒性。
摘要:《数学新课程标准》指出:教师要向学生提供充分的从事数学活动的机会,帮助他们在动手操作、自主探究与合作交流的过程中,真正理解和掌握数学知识与技能,从而学习有价值的数学。根据小学生好动的天性,面对枯燥、抽象的知识,要使他们乐于接受,能主动探索,最有效的教学是让他们参与到学习活动中,学生多种感官参与其中,主动地发现知识,有效地构建知识。因此在数学教学中,教师应该特别重视对学生动手操作的培养,使他们
<正>每年的"党员志愿服务日",衡水市委市直工委都要组织市直机关开展一次大规模的党员志愿服务集中行动。日前已连续开展三年的"万名党员志愿服务集中行动",荣获"全国最佳志
秋天渐行渐远,寒冷的北风和冷雨让南京的天气一天凉似一天。提早做好防范是必要的,比如给自己买一件重量级的羽绒服,给“黄金周”后的爱车做个保养,连带入冬前的保养、检杏。车辆