spark脚本日志输出级别设置

|▌冷眼眸甩不掉的悲伤 提交于 2019-11-27 03:40:14

一、spark日志级别设置

 1、spark脚本日志输出级别设置   

import org.apache.log4j.{ Level, Logger }

Logger.getLogger("org").setLevel(Level.WARN)

Logger.getLogger("org.apache.spark").setLevel(Level.WARN)

Logger.getLogger("org.eclipse.jetty.server").setLevel(Level.WARN)

spark.sparkContext.setLogLevel("WARN")

  详细信息,请参考http://logging.apache.org/log4j

2、spark应用·日志级别设置

方法二:添加 log4j.properties 到 resource

  

注释: Spark log4j 日志配置详解  https://blog.csdn.net/ZMC921/article/details/80238392

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!