Spark配置加载过程

2018-10-10 本文已影响0人麦子星星

程序提交或者spark-shell 执行后相关配置的加载过程为：

1、首先执行环境配置脚本spark-evn.conf，设置基本环境变量

2、加载默认配置文件spark-defaulsts.conf

3、读取命令行配置参数，覆盖之前的配置

4、使用SparkConf对象中的配置信息，覆盖之前的配置

上一篇下一篇

猜你喜欢

热点阅读