配置文件:/home/hadoop/hive.config中的配置无效”

6qfn3psc  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(227)

我正在尝试使用amazon-emr计划Hive作业。我已经按照链接中提到的说明进行了操作
http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/kinesis-hive-scripted-queries.html
但是我得到了错误

"Invalid configuration in configuration file: /home/hadoop/hive.config"
    SCRIPT_TYPE=hive
    SCRIPTS=/home/hadoop/crontab/load.q
    LOG_DIR=/tmp/cronlogs
    JAVA_HOME=/etc/alternatives/jre
    HADOOP_HOME=

我的配置单元文件的内容如下:

SCRIPT_TYPE=hive
SCRIPTS="/home/hadoop/crontab/load.q"
LOG_DIR=/tmp/cronlogs

有人能帮我理解我哪里出了问题吗?

lg40wkob

lg40wkob1#

hive.config的可能选项包括

SCRIPT_TYPE=hive
SCRIPTS=/home/hadoop/crontab/user_agents_count.q
LOG_DIR=/tmp/cronlogs
HADOOP_HOME=/usr/lib/hadoop
HIVE_HOME=/usr/lib/hive

您可能有一个额外的配置(比如javahome)或者缺少一些东西。
复查http://emr-kinesis.s3.amazonaws.com/crontab/hive.config 以及executor.sh如何查找有关错误的更多信息。

相关问题