spark有几种部署模式

2019-09-30  本文已影响0人  scott_alpha

1.local模式:运行在一台机器上,通常用于练手或者测试环境
2.standalone:构建一个基于master+slaves的资源调度集群,spark任务提交给master运行,是spark自身的调度系统。
3.yarn:spark客户端直接连接yarn,不需要额外构建spark集群。有yarn-client和yarn-cluster两种模式,主要区别在于:Driver程序的运行节点。
4.Mesos:国内大环境比较少用

上一篇 下一篇

猜你喜欢

热点阅读