文件未使用streamset从本地加载到hdfs(已成功验证!)

goqiplq2  于 2021-06-01  发布在  Hadoop
关注(0)|答案(1)|浏览(314)

我刚刚开始使用streamset,我正在尝试将一个文本文件从本地加载到hdfs。请注意:我使用的是cloudera manager,这里是“core site.xml”的视图:

<property>
 <name>hadoop.ssl.server.conf</name>
 <value>ssl-server.xml</value>
 <final>true</final>
</property>
<property>
 <name>hadoop.ssl.client.conf</name>
 <value>ssl-client.xml</value>
 <final>true</final>
</property>
<property>
 <name>hadoop.proxyuser.sdc.hosts</name>
 <value>*</value>
</property>
<property>
 <name>hadoop.proxyuser.sdc.groups</name>
 <value>*</value>
</property>
</configuration>

本地文件是存储在“/home/cloudera/desktop”中的文本文件。
以下是streamset中源(本地)配置的视图:

以下是流集中hadoop fs配置的视图:

验证成功!

在我播放管道之后,我应该在hdfs目录中找到我指定的文件,特别是在“/user/cloudera”。
但当我运行它时,文件还没有加载。
我肯定我错过了什么,我找不到答案。你能帮帮我吗!
谢谢,

prdp8dxp

prdp8dxp1#

你需要发挥管道,而不仅仅是验证它。

相关问题