【摘 要】
:
随着大数据技术的发展,爆炸式增长的数据给研究人员、公司乃至社会带来了无法估量的潜在价值。为了从海量数据中获取有价值的信息,我们可通过数据可视化技术进行直观有效的展
论文部分内容阅读
随着大数据技术的发展,爆炸式增长的数据给研究人员、公司乃至社会带来了无法估量的潜在价值。为了从海量数据中获取有价值的信息,我们可通过数据可视化技术进行直观有效的展示分析。数据可视化是一项浩繁的系统工程,其计算过程非常复杂。对于数据可视化使用的大规模数据集,随着时间的推移,新数据在不停的加入,则数据集会发生变化,由此导致上一次展示结果失效。如果对可视化结果再次进行追加数据、过滤、下钻等操作,需要从数据库中重新查找所有数据并重新计算。这样必然导致数据重用率低,一次加载数据过多,加载慢,高成本(频繁产生I/O开销和网络开销)和低效率等问题。如何使研究人员和使用者将数据可视化的重心从繁琐的操作和长时间的展示等待转移到数据可视化结果上来,具有十分重要的研究价值。基于增量技术的加载和计算是每次只需要加载和计算新增的数据,然后合并历史数据。因此,本文提出把增量计算技术和数据可视化相结合形成基于增量计算的数据可视化,其不仅能充分使用历史数据,还能缩短数据可视化时间。本文对现有的数据可视化系统进行分析,针对现有的数据可视化系统对历史数据无法重复利用,以及新增数据需要重新从数据库中获取从而导致数据可视化变慢的问题,设计并实现了基于增量计算的数据可视化系统IDVS。该系统根据时间区间的交集和差集设计了增量优化规则,从而获得增量相关部分和增量无关部分。同时基于增量优化规则,设计了缓存数据集的缓存计算策略。为了加载和计算新增加的数据,设计并实现了增量计算算法SCIC,使得系统每次只需要加载和计算新增的数据,然后合并历史数据进行计算,从而提高了系统的性能。实验结果表明,IDVS能够有效的利用历史中间结果集并只计算和加载新数据,提高了数据可视化效率。
其他文献
免疫算法作为三大模仿人体机制的算法之一,有着较强的全局收敛性,高效的并行记忆功能,良好的嵌入性能。它与鸟群算法,粒子群算法组合形成新的混合算法并应用于PID控制器参数整定和肺结核模型参数估计是本文研究的焦点内容。对于PID(Proportional Integral Derivative)控制器采用ITAE误差性能指标作为目标函数,并利用基于Levy飞行策略和精英免疫策略的自适应鸟群算法对其进行参
原子间的长程相互作用在低能、低温碰撞中(如超冷碰撞,超冷光缔合光谱,Bose-Einstein condensations(BEC)等)起着重要作用。在超冷环境下,原子间的长程相互作用时间长,范围广
近年来,半导体光催化在治理环境污染和解决水资源问题方面显示出了巨大潜力,无论是在实验室科研还是试验阶段的光催化污水处理厂中都取得了不错的进展。在众多的光催化剂中,Ti_O2以其高效、廉价、无毒、可持续、使用方便等优势被广泛使用。然而使用后的催化剂颗粒回收的高成本和复杂性,阻碍了其商业化的进程。光催化剂与膜分离技术的复合将有效解决这一问题,并有望实现大规模的商业化运用。本文对PVDF超滤膜进行了导电
双电子复合(DR)过程作为重要的电子-离子非弹性碰撞现象之一,是实验室高温等离子体和天体等离子体中影响等离子体电离平衡的一种重要的原子动力学过程,对建立等离子体电离平衡
协同制造作为一种新的制造模式,相比传统的生产调度模式有着生产周期短、响应速度快、生产成本低等优点。但由于资源的分布性和异构性导致协同制造面临着以下问题:企业的协作
在小学语文教材中,略读课文的比重随年级升高整体上也在增加,反映出略读课文在语文中占据一定地位。略读课文的出现是让学生在阅读中获取信息,利用从精读课文中学到的阅读技能来独立阅读,从而逐步培养自身的略读能力。但在实践中,一线教师对略读课文的教学却存在一些需要探讨的问题,本研究的目的是发现略读教学中存在的问题,并对原因进行分析,提出有利于略读教学的优化策略,使略读课文在语文教学中真正发挥价值。本文以部编
制动盘作为轨道车辆制动装置的关键元件,直接关系到轨道车辆制动性能的好坏。行驶于高寒、风沙地区的轨道车辆制动盘出现严重磨粒磨损现象,不仅提高了维修成本也对轨道车辆的制动性能产生影响,增加制动隐患。本文以高速列车铸钢制动盘为研究对象,运用有限元仿真和实验相结合的方法对磨粒磨损过程的特性与机理进行分析研究。具体研究内容如下:(1)分析制动盘制动界面嵌入型磨粒的磨损机制;对磨损过程中单颗磨粒的几何形状进行
光电探测器件在军事、通信、生物、医学等领域具有重要的应用价值。低维材料由于高的比表面积和优异的物理化学性能成为构建高性能光电探测器的理想基元。因此本文主要关注低
本文计算了镱原子的基态6s21S0与激发态6s6p3P0o和6s6p3P1o的标量与张量静态电偶极极化率。这些参数对许多与激光冷却与操控镱原子的相关实验具有非常重要的应用价值。通过采
实体解析是关于识别和解析不同数据集合中的数据对,使其匹配现实世界中相应实体的过程。实体解析是存在于数据库管理,信息检索和机器学习等众多研究领域中的长期挑战。随着大