Flink 在最近一年内大出风头,尤其是在2018年天猫双十一的媒体大屏显示,使用 Flink 搭建,一秒处理 17 亿条数据,完美展现了flink 作为流式计算引擎的强大威力。
flink 来自于德国的一家公司 Data Artisans(现在已经被阿里收购),这家公司的主要产品就是flink,我们都知道,flink 和 spark 有一对宿敌,都是计算框架全家桶,都有各自的流处理批处理机器学习等等计算框架,而且互相都有抄袭的痕迹。
现在flink 被阿里巴巴当个宝给捡起来了,据说在阿里巴巴内部Blink(一个基于flink二次开发的产物)已经PK掉Jstorm 成为公司内部最新一代的实时流处理框架,已经在阿里巴巴内部大规模应用于多个业务。
我们都知道在国内阿里巴巴有着强大的技术影响力,一直以强大的人力和财力左右着国内的技术走向,既然这次阿里巴巴收购了flink,后面肯定会玩了命的推广,flink 一定会在各家大厂慢慢用起来,作为大数据特别是实时计算领域的工程师,无论从学习角度,还是从前途(钱途)上来讲, 肯定要趁早入坑。
时至今日,
Flink的卓越性能发展几何?
又多了哪些黑科技?
在海内外分别有哪些生产级别的实践?
下一步有何规划?
Flink Forward China 应该算是 flink 在国内最重量级大会了,里面有来着国内各家大厂的干的不能再干的技术分享
我把相关ppt 放在我github上了,感兴趣的赶快拿走
github 地址:https://github.com/zheniantoushipashi/2018-flink-forward-china
内容如下图:
大家都在看
▼
spark sql源码系列:
是时候学习真正的spark技术了 丨 从0到1认识 spark sql 丨 spark sql 源码剖析 PushDownPredicate 丨 spark sql 源码剖析 OptimizeIn 篇
structured streaming 系列:
structured streaming 原理剖析 丨 structured streaming 碰上kafka 丨structured streaming 是如何搞定乱序时间的
spark streaming 系列:
spark streaming 读取kafka各种姿势详解 丨 spark streaming流式计算中的困境与解决之道
spark core 系列:
彻底搞懂spark shuffle过程(1) 丨 彻底搞懂spark shuffle过程(2) 丨spark内存管理-Tungsten框架探秘
spark 机器学习系列
关注【spark技术分享】
一起撸spark源码,一起玩spark最佳实践
原文始发于微信公众号(spark技术分享):Flink 纯干货一次性都给你| Flink Forward China 2018 大会所有ppt