spark 统一内存管理
2019-10-16 本文已影响0人
邵红晓
-
Spark 1.6 之后引入的统一内存管理机制,与静态内存管理的区别在于存储内存和执行内存共享同一块空间,可以动态占用对方的空闲区域,executor的优先级高
image.png -
在堆外内存中也是执行动态占用机制
image.png
Spark 1.6 之后引入的统一内存管理机制,与静态内存管理的区别在于存储内存和执行内存共享同一块空间,可以动态占用对方的空闲区域,executor的优先级高
在堆外内存中也是执行动态占用机制