如何使用 python Open() 方法读取存储在 hdfs 中的文件？

Question

我想使用 Python open() 方法从 HDFS 读取文件。但是它不起作用。谁能给我一个在 python 中使用 Open() 方法读取 hdfs 文件的方法。

for line in open("hdfs://namenode:54311/user/hadoop/filename.txt"):

但是它给了我一个错误

"IOError: [Errno 2] 没有这样的文件或 目录：'hdfs://namenode:54311/user/hadoop/filename.txt'"

Answer 1

内置open doesn't work with URIs。例如。在open("http://example.com/index.html") 上也会出错。

您的问题在建议的副本中得到了很好的回答。