apache pig map按错误分组

x6yk4ghg  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(290)

我想我现在遇到了一个真正的问题,需要一些Maven的建议。我在咕噜shell中运行下面的脚本,除了dump d,其他一切都正常运行;我在犯错误。 2016-03-28 20:08:30,686 [main]错误org.apache.pig.tools.pigstats。mapreduce.mrpigstatsutil-1个map reduce作业失败!

--I am this script below

a = LOAD '/user/admin/pig/scripts/pig1.csv' USING PigStorage(',') AS (pid chararray,id:int,city:chararray);  
    describe a ;  
    b = LIMIT a 100;  
    C = FOREACH a generate pid, id;  
    dump C;  
    d = group C by pid; dump d;

请帮忙。

xzabzqsa

xzabzqsa1#

如果问题只是 dump d; 可能那条线上有隐藏的字符。您可以使用类似bbedit的编辑器并打开show invisibles来查看此行中是否有任何隐藏的特殊字符。我试着按原样运行脚本,效果很好。

相关问题