基于文档:mapreduce history server api,我可以使用不同的rest调用获取所有信息。有人知道历史服务器最初存储/读取数据的位置吗?那是什么格式的?
5w9g7ksd1#
它将数据存储在hdfs中。它将位于/user/history/done下,并由cloudera和hortonworks发行版中的mapred拥有。我们还可以使用参数提供自定义位置 mapreduce.jobhistory.done-dir 以及 mapreduce.jobhistory.intermediate-done-dir .
mapreduce.jobhistory.done-dir
mapreduce.jobhistory.intermediate-done-dir
1条答案
按热度按时间5w9g7ksd1#
它将数据存储在hdfs中。它将位于/user/history/done下,并由cloudera和hortonworks发行版中的mapred拥有。
我们还可以使用参数提供自定义位置
mapreduce.jobhistory.done-dir
以及mapreduce.jobhistory.intermediate-done-dir
.