在spark应用程序中设置输出日志的级别

spark运行的时候会产生大量的消息，让程序的运行结果看起来比较费劲

所以可以再程序中添加一些代码，设置一下输出日志的级别

1 import org.apache.log4j.{Level, Logger}
2
3 object Example {
4   Logger.getLogger("org").setLevel(Level.ERROR)
5
6   def main(args: Array[String]) {
7     ......
8   }
9 }

代码中Level那里的参数，可以设置为WARN，或者ERROR，这个根据自身需求

直接设置为ERROR可能会错过一些比较重要的警告信息，但是这样输出的内容也少，可以直接看到结果

转载于:https://www.cnblogs.com/zhuangbijingdeboke/p/11580377.html

在spark应用程序中设置输出日志的级别相关推荐

在程序中设置[硬件加速级别]
[文章标题]: 在程序中设置[硬件加速级别] [文章作者]: FishSeeWater[丰盛辉煌] [操作平台]: Windows XP [关键字]: 硬件加速 VC++ 禁用硬件加速设 ...
如何在 Java 应用程序中设置 HicariCP 连接池
在本教程中,我们将介绍 HikariCP 并展示如何在 Java 应用程序中设置 HicariCP 连接池.在我们的应用程序中,我们向 MySQL 数据库发出请求. HikariCP是可靠的高性能 J ...
PyCharm中控制台输出日志分层级分颜色显示
原文:https://blog.csdn.net/linzi1994/article/details/83009233 PyCharm中控制台输出日志分层级分颜色显示版权声明:本文为博主原创文章,未 ...
Linux下设置时区（通过shell设置和程序中设置）及程序中设置环境变量
Shell中设置 bash中 export TZ="Europe/Moscow" date -u -s "2011-10-29 21:55:00&quo ...
程序中设置jvm 参数_高效应用程序的7个JVM参数
程序中设置jvm 参数在撰写本文时(2020年3月),围绕垃圾收集和内存,您可以将600多个参数传递给JVM. 如果您包括其他方面,则JVM参数总数将很容易超过1000个.
webpack设置应用缓存_如何使用Webpack在Rails应用程序中设置TinyMCE
webpack设置应用缓存 by Joanna Gaudyn 乔安娜·高登(Joanna Gaudyn) 如何使用Webpack在Rails应用程序中设置TinyMCE (How to setup T ...
在程序中设置infopath中的整型等域值时出错解决方法
最近一直和infopath表单打交道,碰到的问题也比较多,刚刚就碰到一个在程序中修改infopath表单中域的内容时出错的问题,写出来与大家共享一下,我想这个问题,可能玩infopath的话,迟早会碰 ...
小程序中的实时日志，直接在微信公众号可以看到数据
前言: 小程序中的实时日志,直接在微信公众号可以看到数据. 具体操作: 注意:小程序实时日志每天的条数就大为100w条 1.封装的log.js方法,放到utils里面 var log = wx.get ...
python全局代理_Python程序中设置HTTP代理
0x00 前言大家对HTTP代理应该都非常熟悉,它在很多方面都有着极为广泛的应用.HTTP代理分为正向代理和反向代理两种,后者一般用于将防火墙后面的服务提供给用户访问或者进行负载均衡,典型的有Ngi ...

在spark应用程序中设置输出日志的级别

在spark应用程序中设置输出日志的级别相关推荐

最新文章

热门文章