map reduce过程中连接超时

wlp8pajw  于 2021-05-30  发布在  Hadoop
关注(0)|答案(1)|浏览(281)

我正在使用distcp命令将数据从一个群集传输到另一个群集。在map reduce过程中遇到以下问题:
java.net.connectexception:连接超时
我正在使用以下命令:

/home/hadoop/hadoop/bin/hadoop distcp -update -skipcrccheck "hftp://source:50070//hive/warehouse//tablename" "hdfs://destination:9000//hive/warehouse//tablename"

我怎样才能解决这个问题。我们会给出解决办法的。

cbeh67ev

cbeh67ev1#

如果您试图将数据从一个hdfs传输到另一个hdfs,那么为什么要使用hftp命令?
hftp用于将数据从ftp服务器传输到hdfs。
在hdfs到hdfs之间试试这个

/home/hadoop/hadoop/bin/hadoop distcp -update -skipcrccheck "hdfs://source:50070/hive/warehouse/tablename" "hdfs://destination:9000/hive/warehouse/tablename"

对于ftp到hdfs,请使用正确的ftp地址。

相关问题