HIVE相关论文
在新冠疫情持续肆虐全球的背景下,我国取得了震撼世界的抗疫成绩,进入了以防范为主的后疫情时代。国家逐步建立起了一套预防监控体......
随着电子计算机技术的发展与普及,大数据时代也随之到来。数据技术的不断发展使得各行各业对数据的重视程度与日俱增。企业在生产......
Hive是一种建立在Hadoop上的数据仓库基础构架.Hive系统结构中的解析器,可以将用户编写的HiveQL语句进行解析,解析出相应的MapRedu......
随着移动互联网的快速发展以及智能手机的快速普及,越来越多的人们从线下购物转向了线上购物,因为线上商品相比线下实体店来说价格......
传统的大数据交易集市以促成大数据交易为主, 类似普通商品交易平台, 提供的主要功能偏重于数据目录管理、交易过程的事务管理. 这......
随着互联网以及共享经济的发展,人们的生活方式更加多样化。在出行领域中,共享单车成为城市中众多人选择的交通工具。国内共享单车......
论文首先介绍了数据仓库的基本概念,作为基于Hadoop的数据仓库工具,Hive将结构化的数据文件映射为一张数据表,通过类SQL查询功能的......
为了提高Hive的查询性能,对HDFS数据块放置策略进行了优化,提出了一种基于相关关系分析的数据块放置策略,通过构建并发关系矩阵和......
解决高寒草地的退化问题需要对高寒草地退化现状进行综合评价,而这需要相关数据作为支撑,本研究设计并实现了一个基于Hive的高寒草......
摘要:本文从课程性质与任务、课程教学目标设计、课程内容设计、课程考核等几个方面对大型离散数据分析课程进行了整体设计与研究,旨......
基于Hadoop平台开发的学情分析系统,目的是利用其强大的离线数据处理能力来海量的、静态的、考试数据进行分析处理最终得到每个人......
I was in the garden with Augie, my four-year-old grandson, watching the bees in the lavender1. “Bees make honey,” I said, ......
摘要:当前,传统的数据库技术及单纯基于Hadoop的分布式计算方法已无法满足离线数据和业务量的快速增长需求,运行成本大、工作效率低、......
随着互联网行业的迅猛发展,全球总数据量的爆炸性增长,大数据已成为备受关注的研究课题。Hive作为最常用的一款数据仓库软件,在Had......
随着大数据技术和语义本体技术的飞速发展,领域RDF数据的规模也不断扩大。如今,领域知识图谱普遍由超过百亿数量级规模的RDF数据构......
随着特殊人员数量的不断增加,业务需求越来越复杂,传统的数据仓库已经不能满足现在大数据量的需求。特殊人员管理机构的领导希望从......
电商行业的飞速发展使得用户行为数据规模爆炸式增长,传统的IT架构模式已无法满足持续增长的数据处理需求。针对海量数据处理问题,......
科学技术的发展带来了人们生活办公方式的转变,当今时代所倡导的人工智能,大数据等技术的发展都以数据作为基石。数据的价值在生活......
随着互联网高速发展和共享经济热潮涌动,人们对出行方式的选择也越来越多样化。传统的公共交通以及出租车已经无法满足人们对出行......
学位
随着监测设备和观测手段的逐步提升,人类日常接收的气象数据呈几何式的增长,传统的存储技术已经无法满足海量数据的存储需求。海量......
如今的信息化世界中,人类越来越多的通过网络来获取信息资源和相互交流。近年来,各类门户网站和社交网站的访问量呈指数级增长,网......
本文利用Hadoop+Hive技术分析招聘网站上的IT人才需求信息,对所包含职业、岗位、薪资、所在城市及学历、行业类别等数据信息进行爬......
互联网迅速发展,生活中都能体会到大数据的重要作用.但是有不法分子利用电信进行诈骗,像传统的通话说自己是某某法院的需对受害人......
随着信息时代的来临,大数据已经渗透到人们日常生活的方方面面,与人们日常相关的移动互联、电子商务、诊疗信息,金融类等数据成指......
对大型网站网络日志大数据的分析,可以有效的得出用户访问网站的各种相关报表数据,例如网站点击率、每个国家IP地址数、提取并拼接......
随着高校信息化建设的加速,大数据分析应用被广泛提出。本文首先指出了大数据的概念及其特点,罗列了近期主流大数据平台工具。针对不......
在通信系统飞速发展的时代背景下,基于HIVE的通信系统KPI数据存储方案也逐渐引起人们的关注,信息通信系统大数据技术通过分布式的集......
[摘要]设计了一种基于Hive架构的异构数据整合框架,该框架以多个应用系统数据库为主要研究对象,选取某物流企业供应链过程中的车辆调......
首先针对我军装备保障管理系统关系数据库在海量数据查询以及分析处理方面的不足,在对系统数据资源分析的基础上提出并实现了基于Ha......
融合通信是当今计算机应用领域研究热点之一,人们对融合通信系统中应用服务的要求也越来越高.在数据存取方面,基于传统关系型数据......
为了对海量电子日志数据进行有效处理,提出一种基于HIVE和分布式集群的综合解决方案。首先,从需求分析出发,阐述了分布式集群搭建......
介绍1套采用Activiti和SpringCloud作为基础服务框架,采用HDFS用于文件存储服务,HBase作为历史数据存储服务,Hive及Kafka作为日志......
介绍了嵌入式Windows CE.net注册表的主要作用。针对Windows CE.net支持的不同类型,在基于对象存储的注册表中分析了两种不同的存储、......
HIVE使用类SQL语言大大简化了HDFS上数据管理操作,但是由于其计算引擎基于MapReduce,因此在部分数据操作上存在限制,其中不支持关联操......
通过Hive与Hbase两者本身对外的API接口互相进行通信,搭建了一个Hive over Hbase的整合框架方案。实验证明,基于“Hbase存储入口+H......
针对4G/3G时代可变字段的日志型数据的特征,研究了通过hadoop框架下的HIVE数据仓库进行存储和处理的性能优化方法。本文通过分析HIVE......
通过对比性研究测试,获得在Hadoop架构下,基于HBASE的各操作组件Hive,Lealone,Phoenix等在处理百万级设备接入、数亿条数据时的功能、......
随着电商平台、门户网站的访问量越来越大,产生的日志信息也越来越多,传统的日志文件处理方法无法满足需求。通过分析Hadoop分布式......
分析QAR数据是一种非常有效的监控飞机状态的方法。但随着民航领域的快速发展,QAR数据的规模急剧增大,现有基于关系型数据库的QAR数......
本文旨在研究远程监控心血管疾病时,产生的心电大数据的存储方式。采用Hadoop分布式集群技术,设计基于HBase非关系型(NoSQL)心电数据......
依据车辆轨迹相似度在时间和空间维度上的约束,引入LCSS算法,遵循最长公共子序列的原理,抽象出轨迹中的卡口号序列,提出一种两条车辆轨......
摘要: 农田收割机可满足农田的机械化。当前我国南方农田的机械化水平不高,人机存在着不匹配的矛盾,为了更好满足农田业主的需求,本文......