论文部分内容阅读
在移动学习项目的开发过程中，结合我国教育资源利用率低的问题，通过扩展Heritrix和Lucene，整合教育资源，设计并实现了面向教育视频资源的垂直搜索引擎。针对Heritrix与Lucene串行组合方案难以实现信息抓取、分析过程与索引过程同时进行的问题，提出一种紧耦合的流程优化组合方案，使网页抓取、网页内容分析筛选和建立索引同时进行，降低了系统IO开销和磁盘空间的占用率。实验测试表明，在Heritrix运行过程中嵌入索引建立操作，对系统的运行效率影响较小，满足实际应用的需要。