Spark-提交任务

2020-07-06  本文已影响0人  布莱安托

基本语法

bin/spark-submit \
--class <main-class> \
--master <master-url> \
--deploy-mode <deploy-mode> \
--conf <key>=<values> \
... # other options
<application-jar> \
[application-arguments]

参数说明

--class:应用启动类
--master:指定Master地址,默认为Local
--deploy-mode:发布模式,有两种模式:cluster(发布驱动到Worker节点)、client(作为一个本地客户端),默认为client
--conf:任意的Spark配置属性,格式为key=value,如果值中包含空格,可以加引号"key=value"
application-jar:应用程序jar文件,包含依赖
application-arguments:传给main方法的参数

上一篇 下一篇

猜你喜欢

热点阅读