ImCoder's 博客

叶落九秋枝未枯兮，水迎孤月遥未有辞，尔胡以有不自平兮，非心之逑兮以为然

浮云千里望，路行影自难

登录 or 注册

Spark调优

作者: 独伫小桥风卷袖
分类: 开发
2016-12-25 19:26:34

资源调优

任务的并行度调优

代码调优

Shuffle调优

调节堆外内存

解决问题

- 阅读剩余部分 -

Spark BlockManager

作者: 独伫小桥风卷袖
分类: 开发
2017-09-14 20:50:47

- 阅读剩余部分 -

Spark Shuffle 详解与优化

作者: 独伫小桥风卷袖
分类: 开发
2017-09-14 19:58:17

- 阅读剩余部分 -

MapReduce源码阅读

作者: 独伫小桥风卷袖
分类: 开发
2017-09-06 17:46:04

Client源码

Map源码

Shuffle源码

Reduce源码

- 阅读剩余部分 -

1