我试图使用spark引擎在配置单元中执行查询,但需要在特定队列中运行它们。除了在中,我找不到任何队列名称属性 spark-submit --queue
. 到目前为止,我使用了以下设置:
set hive.execution.engine=spark;
set spark.job.queue.name=MyQueue;
set spark.executor.instances=50;
或者
set spark.queue.name=MyQueue;
但他们不会开始工作。
找到另一个选项:
set spark.yarn.queue=MyQueue
也不管用
暂无答案!
目前还没有任何答案,快来回答吧!