【问题标题】:Get metadata from Azure Data Lake store gen1从 Azure Data Lake 存储 gen1 获取元数据
【发布时间】:2019-01-16 22:09:56
【问题描述】:

我们希望从文件系统中获取元数据。有没有像 fsImage 这样存储这样的数据信息的东西?我们使用了以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS'

但这只列出了一个级别的元数据。根据 HDFS Api 文档,尝试使用以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS_BATCH&startAfter=<CHILD> #added code style

但它给出的错误是它没有实现。

【问题讨论】:

    标签: metadata azure-data-lake


    【解决方案1】:

    我检查了 Azur 支持,他们提到并非 Hadoop 提供的所有方法都已实现。所以在我的情况下 LISTSTATUS_BATCH 没有实现。

    【讨论】:

      猜你喜欢
      • 2020-08-21
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-10-19
      • 1970-01-01
      • 2021-03-02
      相关资源
      最近更新 更多