当我试图打开任何spark作业的历史记录时,我遇到了这样一个问题:“application\u id:application\u xyz not found”,注意:以前我发现这是因为spark历史文件夹已满,所以发生了此错误,但现在我不记得该怎么做了?非常感谢您的帮助。
yfwxisqw1#
要在应用程序完成后访问spark ui,您需要一个单独的历史服务器。请启动服务器
$SPARK_HOME/sbin/start-history-server.sh
并遵循配置说明。
1条答案
按热度按时间yfwxisqw1#
要在应用程序完成后访问spark ui,您需要一个单独的历史服务器。
请启动服务器
并遵循配置说明。