在运行spark程序的时候,有很多info的消息,一是看着很烦,而是让人找不到我们需要的结果,所以很有必要设置一下log的级别,在初学spark的时候,都是直接在,但是我发现并没有用,即使是在本地运行都没用,所以上网查了别的方法,发现很有用,就是重新创建一个文件,然后将其中的日志级别改为WARN,这个log文件其实就在的包中,而源程序使用的也是这个文件,所以我们在包中找到,复制该文件到,然后进行修改相关行,然后就可以了.
具体的实现可以参考这篇博客:
更改日志级别
在运行spark程序的时候,有很多info的消息,一是看着很烦,而是让人找不到我们需要的结果,所以很有必要设置一下log的级别,在初学spark的时候,都是直接在,但是我发现并没有用,即使是在本地运行都没用,所以上网查了别的方法,发现很有用,就是重新创建一个文件,然后将其中的日志级别改为WARN,这个log文件其实就在的包中,而源程序使用的也是这个文件,所以我们在包中找到,复制该文件到,然后进行修改相关行,然后就可以了.
具体的实现可以参考这篇博客:
更改日志级别