我正在使用hortonworks的沙盒虚拟机来运行 Hadoop 服务。我执行了一个 Pig 在中筛选脚本 Tez 模式。不像 Hive ，的 Pig 日志（控制台）不显示有关正在执行的Map器和还原器数量的任何信息。我看错地方了吗？
Hadoop
Pig
Tez
Hive
lnxxn5zx1#
当您在tez模式下运行时，它没有Map器或还原器。tez使用任务的dag（有向无环图）来处理数据。因此Map器/还原器被顶点和边替换。如果您使用的是ambari，那么它提供了一个“tez视图”来查看有关作业的更多详细信息。此外，您还可以启用/安装tez ui(https://tez.apache.org/tez-ui.html)看到这些信息。
1条答案
按热度按时间lnxxn5zx1#
当您在tez模式下运行时，它没有Map器或还原器。tez使用任务的dag（有向无环图）来处理数据。因此Map器/还原器被顶点和边替换。如果您使用的是ambari，那么它提供了一个“tez视图”来查看有关作业的更多详细信息。此外，您还可以启用/安装tez ui(https://tez.apache.org/tez-ui.html)看到这些信息。