hive select count(*)filenotfound job.splitmetainfo异常

3mpgtkmj  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(351)

我运行了一个hiveserver2,并编写了一个java程序从hive进行查询。
我试过这个问题

SELECT * FROM table1

其中,'table1'是配置单元中的表名,它工作正常,并给出了结果。
但当我想跑的时候

SELECT COUNT(*) FROM table1

它引发了一个异常

Exception in thread "main" java.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

我查了一下日志,记录下来了

Job init failed : org.apache.hadoop.yarn.exceptions.YarnRuntimeException: java.io.FileNotFoundException: File does not exist: hdfs://vseccoetv04:9000/tmp/hadoop-yarn/staging/anonymous/.staging/job_1453359797695_0017/job.splitmetainfo
at org.apache.hadoop.mapreduce.v2.app.job.impl.JobImpl$InitTransition.createSplits(JobImpl.java:1568)
at org.apache.hadoop.mapreduce.v2.app.job.impl.JobImpl$InitTransition.transition(JobImpl.java:1432)
at org.apache.hadoop.mapreduce.v2.app.job.impl.JobImpl$InitTransition.transition(JobImpl.java:1390)
....

我查了很多地方,其他人也有“filenotfoundexception”,但不是因为这个原因。
有办法解决这个问题吗?

kiayqfof

kiayqfof1#

可以,
我自己解决了这个问题:)
我之前在hive-site.xml文件中添加了一些属性来检查对事务的支持。我想我可能在那里添加了一些错误的值。现在,我已经删除了我添加的属性,并重新启动了配置单元服务。一切正常:d

相关问题