max files param in write hdfs组件问题

efzxgjgh  于 2021-06-02  发布在  Hadoop
关注(0)|答案(0)|浏览(148)

我有一个hadoop表,它在event\ date上分区,max\ files param设置为200。现在我正在尝试加载180天的数据。从技术上讲,它应该工作,因为它将打开180个文件。但它失败了。如果我指定了一个更高的值,例如300,它就工作了。原因是什么?
任何帮助都将不胜感激!

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题