切换导航
文档转换
企业服务
Action
Another action
Something else here
Separated link
One more separated link
vip购买
不 限
期刊论文
硕博论文
会议论文
报 纸
英文论文
全文
主题
作者
摘要
关键词
搜索
您的位置
首页
会议论文
Flink技术栈及其适用场景
Flink技术栈及其适用场景
来源 :2017中国数据库技术大会 | 被引量 : 0次 | 上传用户:qiuyuwusheng
【摘 要】
:
文章介绍了Flink技术栈及其适用的场景,阐述了批处理、流计算,Flink SQL的最新进展等,并认为流数据会被分配到20/5=4个不同的窗口中,数据在内存中保存了4份。当窗口大小/滑动周期非常大时,冗余现象会非常严重,这是该技术的痛点。
【作 者】
:
时金魁
【机 构】
:
华为杭研所
【出 处】
:
2017中国数据库技术大会
【发表日期】
:
2017年8期
【关键词】
:
Flink技术栈
批处理
流计算
数据存储
下载到本地 , 更方便阅读
下载此文
赞助VIP
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文章介绍了Flink技术栈及其适用的场景,阐述了批处理、流计算,Flink SQL的最新进展等,并认为流数据会被分配到20/5=4个不同的窗口中,数据在内存中保存了4份。当窗口大小/滑动周期非常大时,冗余现象会非常严重,这是该技术的痛点。
其他文献
面向未来的数据库技术的思考
数据库实现弹性调度的两大基础条件是容器化和计算存储分离,容器化支持物理机,VM,Docker,25G网络,RDMA等技术让大规模存储计算分离成为可能。
会议
数据库
技术创新
弹性调度
智能化水平
你知我知的SQL优化
SQL的优化原则要善用索引,避免索引列计算,选择过滤性好的索引,表连接字段创建索引,尽量使用索引覆盖,用衣连接代替代替子查询。
会议
结构化查询语言
优化设计
索引技术
数据类型
100亿数据量+10万并发量+1万属性+复杂查询数据架构设计
文章介绍了作者进行一项数据库设计的过程,项目要求100亿数据量+10万并发量+1万属性+复杂查询,作者阐述了潜在解决方案以及优化解决方案,最后实现项目需求。
会议
数据架构
数据量
并发量
类目属性
数据查询
Apache Griffin Data Quality Solution for both streaming and batch
会议
区块链与大数据的商业结合
今天的互联网,已经近乎完美地解决了信息传递,可以实现任何人、时间、地点,低成本的传递信息,但是,还不能实现价值的点到点传递,仍然依赖于中心机构记账。
会议
大数据
区块链
动态组网
分布式共享记账
共识算法
智能合约
AI在阿里电商搜索的应用
文章首先介绍了电商搜索面临的问题,以及电商搜索的系统框架,然后阐述了AI在商品搜索的一些应用,最后论述了技术尝试的方向。
会议
电子商务
信息搜索
人工智能
DBA成长沉思录
作者介绍了数据库参数的变化,分析了SQL的解析过程,阐述了系统架构的演进策略,论述了性能优化面面观的方法。
会议
数据库
技术参数
结构化查询语言
数据架构
gStore-一种开源图数据库系统及其在企业中的应用
首先简单介绍了知识图谱相关知识,然后阐述了RDF数据管理系统——gStore系统,最后论述了gStore在企业中的应用。
会议
企业管理
数据库
资源描述框架
知识图谱
Massive Schema Changes in Facebook
会议
DBA日常修炼咒个人成长感受分享
作者从大、小、多、少、知、好、乐、吉、吝、凶、悔、能、权、责几方面阐述了数据库管理员的个人成长感受。
会议
计算机企业
数据库管理员
心路历程
与本文相关的学术论文