涉及到磁盘存储路径的配置文件参数有:

hdfs-site.xml

<name>dfs.datanode.data.dir</name>

yarn-site.xml

<name>yarn.nodemanager.local-dirs</name>

将这两个参数的value中的坏盘路径去掉,重启datanode、nodemanager就可以在线换盘了

虽然这样做要多重启一次hadoop进程,但是可以降低换盘对hadoop集群的影响(业务流程的运行及流程执行时间),因为你可以挑选集群相对空闲的时候启停hadoop进程

 

记住,换盘完成后,hadoop进程启动前,要把data.dir的目录建上、赋权(如果配置的存储目录,没有给hadoop用户赋权的话)

相关文章:

  • 2021-12-12
  • 2021-09-30
  • 2021-10-26
  • 2022-02-05
  • 2021-11-12
  • 2021-08-19
  • 2021-06-19
  • 2021-04-01
猜你喜欢
  • 2021-12-21
  • 2021-12-21
  • 2021-05-14
  • 2021-04-27
  • 2021-05-09
  • 2022-12-23
相关资源
相似解决方案