随手记录—查看已停止的spark job日志

2018-08-31  本文已影响0人  Lacia

最近发现有些spark job自己停了,一部分是因为环境资源原因一部分是因为程序本身的问题
如何查看已经停止的spark job日志:
通过yarn application -list或在yarn resource manager中查找到application的id,然后

yarn logs -applicationId application_1535505348755_0001 > log1.log
上一篇下一篇

猜你喜欢

热点阅读