【问题标题】:Does hdfs snapshot works on appending data?hdfs 快照是否适用于附加数据?
【发布时间】:2018-05-14 16:08:46
【问题描述】:

我知道 hdfs 快照会跟踪目录中添加或删除的文件。当我有连续附加的文件(PARQUET)时,行为如何?

【问题讨论】:

    标签: hdfs parquet snapshot


    【解决方案1】:

    当您创建目录/文件的快照时,它们会添加到子目录 /.snapshot 中,因此无论文件格式是什么,它们都按日期升序排列!快照数量没有上限。

    hdfs 快照跟踪目录中添加或删除的文件

    如果我错了,请纠正我,但快照会跟踪每一个更改(甚至在文件中),而不仅仅是目录中添加和删除的文件。

    我希望这可以帮助您了解他们的行为!

    HDFS snapshots documentation

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多