美文网首页Spark
Spark配置加载过程

Spark配置加载过程

作者: 麦子星星 | 来源:发表于2018-10-10 12:14 被阅读0次

程序提交或者spark-shell 执行后相关配置的加载过程为:

   1、首先执行环境配置脚本spark-evn.conf,设置基本环境变量

   2、加载默认配置文件spark-defaulsts.conf

   3、读取命令行配置参数,覆盖之前的配置

   4、使用SparkConf对象中的配置信息,覆盖之前的配置

相关文章

网友评论

    本文标题:Spark配置加载过程

    本文链接:https://www.haomeiwen.com/subject/spkpaftx.html