Spark优化总结
2021-06-15 本文已影响0人
nlpming
【总结】解决Container Killed by Yarn For Exceeding Memory
https://blog.51cto.com/u_10120275/2718310
数据倾斜问题
- spark数据倾斜的解决方案
https://github.com/ZHHBeHappy/Learn-Big-Data/issues/13
- Spark性能优化之道——解决Spark数据倾斜（Data Skew）的N种姿势
https://cloud.tencent.com/info/972d79677a7870cbef7e7ea511fd0a66.html
参考资料
- spark性能优化指南 —— 基础篇
https://tech.meituan.com/2016/04/29/spark-tuning-basic.html - spark性能优化指南 —— 高级篇
https://tech.meituan.com/2016/05/12/spark-tuning-pro.html
