参考了你的spark log4j设置方法,成功将日志按天输出到日志,但是又碰到一个新问题,那就是我使用的时standalone模式,开启了history server 还有必要将日志输出到文件吗,这样会产生两份日志文件。十分困惑你的做法是什么
日志主要是用来查看异常信息,排查错误,有一个就可以了。
可是,我的history server 中executor中查不到driver日志