将hdfs中的文件名列表导出为Dataframe

lf5gs5x2  于 2021-07-13  发布在  Hadoop
关注(0)|答案(0)|浏览(207)

我的目录中有30000个json文件。这里有一个类似的问题。

!hadoop fs -ls '/path/Tweets/'

-rw-r--r--   3 username username   55220293 2017-06-22 10:15 /user/Tweets/tweets201706221015.json
-rw-r--r--   3 username username   52384528 2017-06-22 11:15 /user/Tweets/tweets201706221115.json
-rw-r--r--   3 username username   56190692 2017-06-22 12:15 /user/Tweets/tweets201706221215.json

我想把这个巨大的列表保存为一个Dataframe。怎么做?
谢谢!

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题