面向大规模数据的在线新事件检测

来源 :计算机工程 | 被引量 : 0次 | 上传用户:kongjiahao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
通过分析基于新闻要素的在线新事件检测算法的时间消耗,提出一种面向大规模数据环境的在线新事件检测算法。该算法利用基于倒排索引的高效相似报道搜索机制,有效减少单路径聚类算法中的相似度比较次数。通过对报道预处理、报道与事件比较以及索引搜索这3个过程的并行化,提高算法在多机环境下的运行效率和可伸缩性。实验结果表明,该算法在不影响漏检率和误检率的基础上,提高了新事件检测的速度,并且在千万到亿级别的报道规模下,其吞吐量达到150条/s~200条/s。
其他文献
我国盐碱化土地面积较大,人为破坏现象十分严重,直接原因是不客观的耕作和过度放牧造成的,使原本脆弱的生态系统不断加剧,所以草原生态系统的恢复刻不容缓。对于破坏较轻的土
作为决策者的认知结构,心智模式在组织与管理决策中发挥着重要作用。最近以来,国际顶级期刊连续刊发知名学者的相关研究,显示出学术界从心智模式视角探究决策问题的兴趣与日
<正>造成瘀血的原因很多,或跌打损伤失治、瘀血内积,或外伤留连内结成瘀,或忧思气郁成瘀,或久病内伤、久痛入络成瘀。凡各种原因导致的瘀血停积于体内,气血郁遏不通,化
历史的长河奔涌浩荡,时代的车轮滚滚向前。在习主席的亲自决策指挥下,军队领导指挥体制进行了重大改革,《战旗报》作为成都军区党委机关报,已完成光荣使命,载入史册。值此《
本文在翻译目的理论的指导下从目标语读者的角度对梁启超《十五小豪杰》的翻译进行了具体剖析,主要论述了《十五小豪杰》这部译作的目标语读者的特征及其文化背景等因素对梁
目的:旨在阐明清末著名医家郑寿全从阳虚论治心肾不交的临床经验。方法:以对《医理真传》一书相关内容的诠释阐扬为主,阐明郑氏对阳虚型心肾不交的独特见解。结论:郑氏认为阳
印象管理在人际交往中必不可少,对于处在类似人际交往状态、缺少即时互动的主持人来说,印象管理尤为重要。论文剖析受众对主持人的心理期待,以期做好主持人的印象管理。
蓝紫激光和中红外激光在基础研究和国防工程中有重要的应用前景。单光子吸收的碱金属蒸气激光器具有量子效率高、受激发射截面大和热管理性能好等优点,近些年来已成为激光领
目的:探讨NF—KB与系统性红斑狼疮鼠树突状细胞(DCs)参与免疫耐受机制的关系。方法系统性红斑狼疮模型小鼠18只,随机分为激素组、NF—KB特异性抑制剂吡咯啉烷二甲基硫脲(PDTC)组及
随着我国高等教育评估的深入发展,第三方评估越来越受到社会各界的正视,高等教育正积极引入第三方评价制度。高等教育第三方评估以其中介性、独立性、专业性等特点开展教育评估