hadoop 在Amazon Mapreduce中运行的pig脚本中的STREAM关键字

nhjlsmyf  于 2023-03-17  发布在  Hadoop
关注(0)|答案(2)|浏览(168)

我有一个pig脚本,它可以激活另一个python程序,我可以在自己的hadoop环境中这样做,但是当我在Amazon map reduce WS中运行我的脚本时,总是失败。
日志上写着:
org.apache.pig.backend.executionengine.ExecException:错误2090:处理缩减计划时收到错误:“”失败,退出状态为:127在组织。Apache。Pig。后端。Hadoop。执行引擎。MapReduce层。PigMapReduce$Reduce.runPipeline(PigMapReduce. java:347)在组织。Apache。Pig。后端。Hadoop。执行引擎。MapReduce层。PigMapReduce$Reduce.processOnePackageOutput(PigMapReduce. java:288)在组织。Apache。Pig。后端。Hadoop。执行引擎。MapReduce层。PigMapReduce$Reduce.reduce(PigMapReduce. java:260)在组织。Apache。Pig。后端。Hadoop。执行引擎。MapReduce层。PigMapReduce$Reduce.reduce(PigMapReduce. java:142)在org.apache.hadoop.mapred.ReduceTask.run(还原任务。java:321)在组织。Apache。Hadoop。已Map的任务跟踪器$Child.main(任务跟踪器。java:2216)
有什么想法?

wd2eg0qa

wd2eg0qa1#

您是否确保脚本已沿着到Elastic MapReduce作业?

rqdpfwrv

rqdpfwrv2#

问题解决了!我只需要在定义流命令时使用该高速缓存('s3://')选项

相关问题