一台主要的计算机master,在HDFS中担任NAMENODE 在mapreduce2担任RESOURCEMANAGER的角色

1、配置data1虚拟机

ssh data1
 

hadoop 配置Hadoop集群,Ubuntu16.04

sudo rm -rf /usr/local/hadoop/tmp/dfs
 

删除文件夹下的内容

mkdir -p /usr/local/hadoop/tmp/dfs/data
 

修改拥有者

sudo chown -R hadoop:hadoop /usr/local/hadoop/
 

退出链接

exit

重复以上的动作,逐一修改data2 data3

回到master本机,继续进行操作

hadoop 配置Hadoop集群,Ubuntu16.04

注意文件夹的名字

全部设置完成之后,格式化目录 NameNode HDFS

./bin/hdfs namenode -format
 

成功之后的截图

hadoop 配置Hadoop集群,Ubuntu16.04

hadoop 配置Hadoop集群,Ubuntu16.04

 

拖到最后,出现successfully说明成功

同时启动HDFS和YARN:

 ./sbin/start-all.sh
hadoop 配置Hadoop集群,Ubuntu16.04

hadoop 配置Hadoop集群,Ubuntu16.04

 

查看master(NaneNode)的进程是否启动

hadoop 配置Hadoop集群,Ubuntu16.04

HDFS的功能:NameNode,secondaryNameNode

YARN的功能:RESOURCEMANAGER

链接到data1,查看DATA1服务器的状态

hadoop 配置Hadoop集群,Ubuntu16.04

看到data1的DataNode已经启动

相关文章:

猜你喜欢
相关资源
相似解决方案