美文网首页
Spark 在脚本中设置日志输出等级

Spark 在脚本中设置日志输出等级

作者: 枫隐_5f5f | 来源:发表于2019-06-19 15:15 被阅读0次

    在任务脚本中定义日志输出的等级,只输出WARN级别以上的日志

    spark = SparkSession.builder.getOrCreate()
    sc = spark.sparkContext
    sc.setLogLevel("WARN")
    

    相关文章

      网友评论

          本文标题:Spark 在脚本中设置日志输出等级

          本文链接:https://www.haomeiwen.com/subject/tgdkqctx.html