每个Map器执行的任务

isr3a4wc  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(291)

我有一个sql,它有多个连接。

2017-12-28 05:15:53,140 Map 1: 15/15    Map 6: 9/9  Map 7: 29/29    Map 8: 198(+2)/200  Map 9: 1/1  Reducer 2: 1/1  Reducer 3: 0(+1)/1  Reducer 4: 0(+3)/3  Reducer 5: 0(+11)/11

上面是最近几个小时的日志中的一行。我如何检查Map8正在做什么,为什么2个Map绘制者要花这么长时间

map 8: 198(+2)/200

任何关于每个Map绘制者在tez中所做的事情的想法都会有所帮助。

kzmpq1sx

kzmpq1sx1#

我建议您查看dag图形视图/顶点计数器并进行分析。你将得到一些关于为什么顶点要花这么长时间的见解。

相关问题