尝试从spyder加载hdfs文件时拒绝连接

8tntrjer  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(340)

我正在一个名为spyder的pythonide中使用apachespark和python(pyspark)。我尝试从hdfs加载一个文件,如下所示:

hdfs_file = sc.textFile(hdfs_path)

我确保路径正确并且文件存在,但是当我执行命令时,我得到下一个错误行:

Py4JJavaError: An error occurred while calling o24.partitions.
: java.net.ConnectException: Call From XXXX.local/127.0.0.1 to localhost:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused

如何从hdfs正确加载文件?

ljsrvy3e

ljsrvy3e1#

解决了的!
它只是在启动hdfs服务器。

相关问题