Spark 错误记录
2018-08-29 本文已影响4人
利伊奥克儿
- scheduler.LiveListenerBus: Listener SQLListener threw an exception
java.lang.NullPointerException

在这个报错中没有显示自己编写代码的问题,一开始度娘了很久都没结果,一样的代码在其他地方能执行,在这里就执行不了。
由于我的每个任务都有不同的执行参数,所以每个参数都写在一个文件里面直接拷贝。这次出问题就出在

--num-executors 16
--executor-cores 8
--executor-memory 16G \

--executor-memory 16G \ 这个参数漏了
贼低级错 但是很难排查出来