基于海量异构数据源的数据分析处理平台设计与实现

来源 :数字通信世界 | 被引量 : 0次 | 上传用户：fbcpingqi

【摘要】

：

随着信息化时代的飞速发展,大数据浪潮已成不可阻挡之势,这就需要将门类庞杂、种类繁多的数据进行整合,全面深入挖掘信息之间的关联关系。文章首先分析了各类异构数据源分析

【作者】

：

王博陈凌晖

【机构】

：

上海现代信息技术研究所;

【出处】

：

数字通信世界

【发表日期】

：

2004年期

【关键词】

：

异构数据大数据 Spark ElasticSearch

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

随着信息化时代的飞速发展,大数据浪潮已成不可阻挡之势,这就需要将门类庞杂、种类繁多的数据进行整合,全面深入挖掘信息之间的关联关系。文章首先分析了各类异构数据源分析处理带来的困难和产生的原因,其次依据数据分析处理要求,详细阐述了海量异构数据源分析处理平台的设计和实现。

其他文献

无线传感器网络时变充电和动态数据路由算法研究

利用无线充电设备周期地为无线传感器节点进行充电,可使传感器节点持续工作,解决无线传感器网络能量问题,但需设计合适的节点充电方案和网络路由方案。以无线充电设备驻站比最大化为优化目标,依次提出了充电及网络路由方案的连续时变模型、离散N+1阶段非线性模型及可解的离散N+1阶段线性模型,在证明模型合理性后最终求解。结论给出了具体网络的最优充电和路由策略。

期刊

无线传感器网络无线能量传输充电周期连续时变模型离散N+1阶段模型线性规划

对定标用标准紫外辐射光源性能指标的探讨

紫外辐射是模拟环境条件测试的重要组成部分，对紫外辐射强度、剂量等的定标对于老化耐久实验数据的准确性和可靠性具有重要意义。本文通过实验手段对目前常见的定标用紫外标准

期刊

紫外辐射标准光源均匀性稳定性

乳液型有机硅消泡剂研究

聚二甲基硅氧烷具有良好的消泡能力,采用Span-Tween体系对其进行乳化,研制成乳液型消泡剂,该消泡剂具有良好的离心稳定性和静态稳定性.

期刊

有机硅消泡剂乳化剂二甲基硅油

基于Web服务的异构数据源统一检索系统的研究

本文针对数字图书馆异构数据源统一检索的需求,在研究异构数据源统一检索技术的基础上,分析了基于Web服务的统一检索的体系结构,设计了一个异构数据源统一检索系统框架;针对