spark INFO log
博客专区 > Si2 的博客 > 博客详情
spark INFO log
Si2 发表于2年前
spark INFO log
  • 发表于 2年前
  • 阅读 35
  • 收藏 0
  • 点赞 0
  • 评论 0

腾讯云 技术升级10大核心产品年终让利>>>   

摘要: 不显示 spark 调试日志,

使用spark的python版本, ./bin/pyspark

各步transform,action会显示很多信息,影响观察输出结果。

cp conf/log4j.properties.template conf/log4j.properties
vim conf/log4j.properties

修改

log4j.rootCategory=INFO, console

为:

log4j.rootCategory=WARN, console


共有 人打赏支持
粉丝 2
博文 37
码字总数 16355
×
Si2
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: