spark 源码研究

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

› Spark

› Mastering Apache Spark 2

这是一个创建于 2540 天前的主题，其中的信息可能已经有所发展或是发生改变。

我建了个公众号专门研究 spark 源码的欢迎大家关注大家可以试读一下 https://mp.weixin.qq.com/s/rjrpRZWj2pyscPHOMF1QCQ

3 条回复 • 2019-01-28 20:25:12 +08:00

F281M6Dh8DXpD1g2

2019 年 1 月 28 日 via iPhone

只讨论 query rewrite 就够写半本书了
光 predicate pushdown 什么时候能推什么时候不能推,推了之后会不会适用别的优化就够喝一壶了
还有 wholestage codegen 和

F281M6Dh8DXpD1g2

2019 年 1 月 28 日 via iPhone

@liprais 按错了，接楼上
wholestage codegen 和 vector execution 也可以顺带的讲一下的
标题过于真实，建议改成了解 spark sql

rootzeal

2019 年 1 月 28 日 via Android

@liprais 有道理慢慢来一步步深入标题是夸张了点