使用pig分析twitter提要中的json

yrdbyhpb  于 2021-06-25  发布在  Pig
关注(0)|答案(1)|浏览(283)

我已经下载了1gb的tweets,并想用pig分析相同的tweets,如何使用pig读取tweets的json格式,我正在学习pig,任何指针都会有很大的帮助。人们谈论使用pigjsonloader(),但这不是piggybank的一部分。

ao218c7q

ao218c7q1#

你为什么一定要去存钱罐?您可以使用elephantbird的com.twitter.elephantbird.pig.piggybank.jsonstringtomap,它可以帮助您更动态地执行操作。它不会解决你所有的问题(例如包),但它很容易处理。

相关问题