基于广域网大数据传输技术的研究与实现

被引量 : 9次 | 上传用户:roath
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络技术的发展,以及计算机处理能力的提升,互联网产品如雨后春笋般涌现,整个世界正逐渐向万物互联靠近。然而随之产生的海量数据却困扰着众多科研工作者,这些数据不仅容量大,产生速度快,而且种类繁多,具有跨地域性特点。人们通常将这样的数据称之为大数据,由大数据所衍生的一些应用,如舆情分析、气象预测以及广告投放等,都具有重要商业价值和科研价值。大数据在广域网内高效稳定地传输,是大数据应用的前提,也是进行大数据分析与处理的基础。传统广域网数据传输的解决方案虽然比较成熟,但在大数据时代具有诸多局限性,例如传输过程繁琐,传输效率不佳以及不适用于多源数据传输。论文对大数据传输相关内容进行了深入研究,重点解决了广域网内数据传输不稳定以及传输效率低的问题。本文通过对比研究,选取TCP作为传输层协议,设计出一种高效的应用层报文,以解决传输过程繁琐的问题;通过对相关数据传输技术以及广域网加速方案的分析与研究,利用推送与收取的思想,设计了以事件为驱动的消息队列,以保证大数据传输的可靠性;结合广域网和大数据的特点,通过自动调节机制,设计了一种高效的资源控制和缓存控制方法,以提高数据传输的效率;利用JAVA和C语言完成了通信管理模块、数据报封装模块、节点数据传输模块以及中心同步模块的设计和集成,构建了一种基于消息队列的大数据传输系统。通过对传输系统的功能和性能测试,证明了论文设计的传输系统与其他的传输系统相比,传输速率和网络丢包率都有一定优势。
其他文献
提出了落实消防安全责任制的法律依据 ,阐述了消防监督工作中应采取的对策
自1999年高等教育扩招以后,我国已进入了高等教育大众化的阶段。然而,在面对取得成绩的同时,我们更应该正视高等教育质量中所出现的毕业生素质、能力参差不齐等严峻问题。并
痛风(gout)是由嘌呤代谢紊乱致尿酸生成增多或尿酸排泄减少所引起的一组代谢性疾病,临床分期为:无症状的高尿酸血症期,急性复发性痛风,痛风发作间期和慢性痛风石性痛风。近年
确定了压接结构方案设计及压接工艺,论证了压接结构的特点,通过分析有关项目考核结果及试验数据,肯定了隔爆型电机引接线与接线螺栓采用压接结构的联接方式。
党的十八大以来,以习近平同志为核心的党中央对学校思想政治工作高度重视,指出要把思想政治工作贯穿教育教学全过程,实现全程育人、全方位育人。中学共青团在共青团工作中发
研究黑蒜多酚体内抗氧化功能。按《保健食品检验与评价技术规范》,将SPF级KM小鼠随机分为空白对照组、模型对照组和3个不同剂量的黑蒜多酚量组,以2.04,4.10,12.25 g/(kg·bw)
点火系统的工作对发动机的性能有着决定性的影响.本文简要回顾了电控点火系统的发展过程,讨论了点火系统、点火器件、点火控制及控制理论等方面的发展趋势,并介绍了目前国内
货运动车组是我国面向高铁快捷货运市场研发的新型动车组。在分析货运动车组技术特点的基础上,通过与既有高铁快运方式进行对比,分析货运动车组的优势以及运输需求量、货运作
随着信息技术的发展,人们逐渐意识到,若是能够对信息技术进行充分利用与开发,并且使之在生物教学活动中高效应用,一定会对生物教学活动产生巨大的作用。根据这种认识和期待,我国生物教育界的很多教育科研人员正在努力做出各种尝试,例如他们将信息技术引入生物教学过程中,且应用范围较为广泛。但是合理的引入并利用微视频仍旧是一大难题,又是如何将微视频与生物学科密切联系起来,又是如何将微视频应用到高中生物实验教学之中
主要介绍了两种国内自主开发的人员疏散软件在实际工程中的应用,与国际上公认的疏散时间计算法相比较,并分析其适用范围。