我们最近开始使用cdh6.2和hive-2.1.1。在现有的作业(在旧集群中)中,我们已经设置了一组默认设置的属性。我们使用的一个属性是 hive.exec.parallel=true
.
在新的(hive-2.1.1/cdh6.2.1)集群中运行作业时 hive.exec.parallel=true
beeline没有编写任何控制台日志,这些日志显示作业的状态、应用程序url和其他信息,如下面所示
INFO : Running with YARN Application = application_1596901153465_0484
INFO : Kill Command = /opt/cloudera/parcels/CDH-6.2.1-1.cdh6.2.1.p0.1425774/lib/hadoop/bin/yarn application -kill application_1596901153465_0484
INFO : Hive on Spark Session Web UI URL: http://us-east-1a-test-east-cdh-tasknode670.throtle-test.internal:45956
INFO :
Query Hive on Spark job[0] stages: [0, 1, 2]
INFO : Spark job[0] status = RUNNING
INFO : Job Progress Format
CurrentTime StageId_StageAttemptId: SucceededTasksCount(+RunningTasksCount-FailedTasksCount)/TotalTasksCount
INFO : 2020-08-09 04:28:23,096 Stage-0_0: 0(+1)/3 Stage-1_0: 0/64 Stage-2_0: 0/64
INFO : 2020-08-09 04:28:26,106 Stage-0_0: 0(+1)/3 Stage-1_0: 0/64 Stage-2_0: 0/64
INFO : 2020-08-09 04:28:27,110 Stage-0_0: 0(+3)/3 Stage-1_0: 0/64 Stage-2_0: 0/64
我只能在禁用的情况下获取这些日志 hive.exec.parallel=true
有人能帮我获取控制台日志吗,即使是在配置单元并行执行的情况下?
暂无答案!
目前还没有任何答案,快来回答吧!