一种基于银行家算法的网络爬虫资源配置策略

来源 :智能系统学报 | 被引量 : 0次 | 上传用户:m2564
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
死锁是多用户操作系统正常运行的一个重要问题,系统资源不足会导致爬虫算法进入不安全状态,进而引发死锁等问题。引入被广泛用于操作系统的银行家算法,调度多个网络爬虫进程并发运行,并且为每个进程合理分配系统资源,当进程无法获取系统资源时,则等待其他进程分配完成后释放系统资源,从而完成资源分配,有效降低死锁率。采用C++编程,设计并实现基于银行家算法的网络爬虫配置策略。通过2 h 21 min 35 s工程测试,urllib2算法死锁率为30%,新算法死锁率仅为2%,测试证明该策略能够有效降低死锁率,能高效完成多个
其他文献
建国初期,毛泽东在领导人民致力于大规模经济建设的同时,十分留意扫除旧中国留下来的愚昧落后,推动社会风气转变。他摒弃孤立单一方式,运用强制打击、说服教育、经济保障、舆论宣
目的急性腔隙性脑梗死患者早期神经功能恶化(early neurological deterioration,END)的影响预测指标目前尚不明确。文中拟探讨首发急性腔隙性脑梗死患者脑微出血病灶的位置、数
1产业园创建的必要性现代农业产业园是现代农业的展示窗口、是农业科技成果转化的孵化器、是生态型安全食品的生产基地、是提高农村经济效益和农民收入的载体、是实现乡村振
为了加强对云南抚仙湖的保护和治理,环湖棚户区改造和生态移民搬迁项目10月10日启动,至此,我国最大深水型淡水湖泊抚仙湖沿湖剩余的8143户2.2万余人将分批次全部搬离沿岸保护区
报纸
随着科技的迅速发展,自动化逐渐走入人们的日常生活。基于对传统识别装置的改进,本文设计一种能够对移动目标进行跟踪识别的目标定位装置,方案包括硬件电路,软件设计及图像处
随着新课改的推进,高校体育教学的教学目标及内容也发生了相应的变化.当前,高校的体育教学不仅需要向学生传授体育知识、教授体育技能,还要注重学生的意志品质、道德情感的培
目的探讨个体化的认知康复训练联合药物治疗脑卒中后血管性认知障碍的临床效果。方法将84例脑卒中后血管性认知障碍患者随机分为两组,各42例。对照组患者予以药物治疗,观察组
本文通过比较韩国语汉字音和粤方言、客家方言和潮汕方言入声韵尾和阳声韵尾发音的共同点和对应关系,阐述广东地区韩国语学习者在韩国语汉字词学习上的优势。
目的:探讨超微针刀治疗腰椎间盘突出症(LDH)对患者腰椎功能的改善作用。方法:选取2016年4月—2018年10月本院收治的LDH患者112例,采用随机数字表法将患者分为实验组和对照组,
在当前道德教育理论研究和实践应用领域,存在重目的轻手段的倾向,认为为实现道德教育培养个体德性的目的,可以不择手段。这一倾向违背了道德教育的本质,割裂了道德教育目的与