hadoop集群之间有时候需要将数据进行迁移,如将一些保存的过期文档放置在一个小集群中进行保存。

    使用的是社区提供的功能,distcp。用法非常简单:

    hadoop distcp hdfs://nn1:8020/foo/bar  hdfs://nn2:8020/bar/foo

    加上参数 -i 表示不用去管failure -m 设置map数

相关文章:

  • 2021-07-24
  • 2022-02-11
  • 2022-01-01
  • 2022-12-23
  • 2021-09-06
  • 2021-11-08
  • 2022-01-20
  • 2021-04-02
猜你喜欢
  • 2021-12-20
  • 2022-12-23
  • 2021-11-08
  • 2022-12-23
  • 2022-03-01
  • 2021-11-02
相关资源
相似解决方案