hadoop中缺少暂存目录

thigvfpy  于 2021-06-01  发布在  Hadoop
关注(0)|答案(0)|浏览(222)

我第一次尝试设置hadoop-3.0.0(yarn和map reduce)。我想查看系统的jobhistory日志,它可以作为输入输入到瘤胃中。
我在执行伪分布式的操作。
我已经按照这里的建议启用了yarn日志聚合。
本文讨论在哪里可以找到日志。它说它在hdfs的以下目录中。

/user/uname/.staging/job_id/

但是,我找不到这个目录。下面是我得到的错误信息。

bin/hdfs dfs -ls /user/uname/.staging
ls: `/user/uname/.staging': No such file or directory

我也尝试在本地文件系统中搜索/user/uname/.staging。但是,我得到了相同的目录不存在错误。(这是显而易见的,因为我没有创建任何。)但是,我已经在hdfs系统中创建了/user/uname(在进行设置时,/user/uname/确实存在,但是在其中找不到.staging子目录)。
这个stackoverflow答案确实谈到了类似的问题,但是我不太清楚如何使它适应我的问题,而且这是针对一个旧版本的hadoop的,它似乎不适用于hadoop-3.0.0
任何帮助都将不胜感激。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题