基于GoldenGate产品的实时数据同步平台架构演进

来源 :2017中国数据库技术大会 | 被引量 : 0次 | 上传用户:Zerolzx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Oracle GoIdenGate(简称OGG)是一款实时数据集成和复制产品,可跨异构系统提供实时数据集成、事务数据复制和数据比较。支持实时商务智能,能够改善业务洞察;提供查询分流,可显著提升OLTP性能;具有零停机时间数据迁移、灾难恢复和双活数据库同步功能,可确保持续可用性。
其他文献
弹性数据库在线动态扩容技术提高了系统可用性、稳定性,提供了数据库日志消费、中间件处理、自动运维管理等一站式技术方案,兼容原有应用系统,利于系统升级、迁移。
介绍了Pivotal Greenplum 5.0开放源代码数据库的高速数据加载、多态存储、并行执行、敏捷开发方法学等内容。
相对于行存,列存极大提高了宽表上分析负载的I/O性能,当一个查询只访问1000列中的20个时,无须读取整个数据块,最大限度减少了所读取的数据量。
传统企业级数据仓库向大数据平台转型,解决传统数据应用问题,解决大数据计算问题,解决数据实时性处理问题.
数据库管理员关键原理机制要深入理解,官方文档必须通读至少一遍,有条件的话可阅读源码加强理解,带团队、带新人,逼迫自己提高,要有适合业务需求的DB管理系统。
DTrace是一个动态跟踪工具,用来在生产和试验性系统上找出瓶颈的工具,可以通过D脚本语言创建定制程序.
估价系统的难点及挑战是交易数据的稀缺、稀疏和时变,由于数据的稀疏性,很难通过统计的方法去除异常挂牌/成交,每一条成交和挂牌都十分重要,为参考均价添加平滑:当历史数据和新数据发生冲突时,选择相信新数据,但每天只信一点点,等待业务部门复核数据。
魅族是中国智能手机创新与设计的领先者,多媒体终端行业知名品牌,以生产智能手机的多媒体终端的科技公司,专注多媒体终端研发与生产的高科技企业。
首先介绍了Alluxio应用场景与1.4版本的新特性,然后阐述了基于Alluxio的Spark DataFrame/RDD性能调优内容,最后论述了基于Alluxio提升HDFS集群的性能和SLA稳定性。
SparkSQL多源数据整合能够同时分析不同的数据源中的数据,根据不同的SQL自动选择合适的数据源,同时分析结果写入合适的数据源。