【摘 要】
：
目的:研究使用基于Flume的流式数据分层采集技术,以提高数据采集的可靠性与有效性,为流计算引擎提供稳定的数据流。方法:使用基于Flume的流式数据分层采集模型,并在此基础上
【机 构】
：
杭州市保密技术测评中心,浙江工业大学计算机科学与技术学院
论文部分内容阅读
目的:研究使用基于Flume的流式数据分层采集技术,以提高数据采集的可靠性与有效性,为流计算引擎提供稳定的数据流。方法:使用基于Flume的流式数据分层采集模型,并在此基础上提出分层采集进程监控方法和基于分组的双层哈希负载均衡方法。结果:从数据迁移率、吞吐量、节点平均耗时三个指标进行评价,实验结果表明,运用基于分组的双层哈希负载均衡方法能有效地均衡节点间的负载,提高数据采集效率。结论:分布式环境下,运用基于Flume的流式数据分层采集模型,所提的分层采集进程监控方法和双层哈希负载均衡方法可有效提高数据采集
其他文献
目的探讨优质护理干预在ICU呼吸机依赖患者中的应用效果。方法 80例呼吸机依赖患者随机分为两组各40例,对照组采取常规ICU护理干预,观察组在对照组基础上采用优质护理干预,比
目的分析尿微量白蛋白(U-mAlb)、 hs-CRP水平联合检测对糖尿病早期肾损伤的诊断价值。方法纳入43例单纯糖尿病患者为糖尿病组,43例糖尿病合并早期肾损伤患者为肾损伤组,健康
目的:研究加热炉温度和拉伸力对管坯拉制成型的影响。方法:利用有限元数值模拟软件,建立管坯有限元模型,基于顺序耦合热应力分析法对管坯在高温无接触拉制情况下的成型过程进
目的:研究镂空不锈钢超材料的双频段类电磁诱导反射(Electromagnetic-like induced reflection,EIR-like)。方法:采用有限积分法CST软件数值仿真镂空不锈钢超材料的反射率与
目的探讨胞磷胆碱钠联合尤瑞克林治疗急性脑梗死(ACI)的临床疗效。方法回顾性分析2019年3月至2020年4月我院收治的78例ACI患者的临床资料,根据治疗方法的不同分为两组各39例
目的:研究受非线性自激波浪力影响下的海洋平台网络化模糊系统建模和控制问题。方法:针对一类含有主动质量阻尼器的导管架海洋平台,采用Takagi-Sugeno(T-S)模糊方法模糊化平
目的:为保证扬声器质量,研制了一种新的扬声器功率测试系统,并评估测试系统测量的准确性。方法:该系统以单片机作为中央处理器,采用直接数字频率合成技术提供输入信号,采用基
目的:探究制备在聚酰亚胺PI柔性衬底上的Ni 81 Fe 19/Ni 50 Mn 50双层膜的交换偏置效应。方法:采用直流磁控溅射技术分别在硅片和PI衬底上制备Ni 81 Fe 19/Ni 50 Mn 50双层膜
目的探讨抗生素联合优思明对人流手术后宫腔粘连和子宫内膜的影响。方法 156例人流手术患者随机分为两组各78例,观察组给予抗生素联合优思明治疗,对照组给予抗生素治疗,比较
目的探讨血清胱抑素C (Cys-C)联合糖化血红蛋白(HbA1c)诊断2型糖尿病患者早期肾功能损伤的临床价值。方法选择100例2型糖尿病合并早期肾功能损伤患者作为观察组,100例单纯2型