spark有几种部署模式
2019-09-30 本文已影响0人
scott_alpha
1.local模式:运行在一台机器上,通常用于练手或者测试环境
2.standalone:构建一个基于master+slaves的资源调度集群,spark任务提交给master运行,是spark自身的调度系统。
3.yarn:spark客户端直接连接yarn,不需要额外构建spark集群。有yarn-client和yarn-cluster两种模式,主要区别在于:Driver程序的运行节点。
4.Mesos:国内大环境比较少用