start-all.sh 无法在从节点上运行进程

Question

我正在尝试在我的笔记本电脑中配置具有一个主从节点的多节点集群。当我从主节点运行 start-all.sh 时，所有守护进程都在主节点中运行，但 Datanode 和 tasktracker 未在从节点上启动。启用了密码较少的 ssh，我可以在没有 pwd 的情况下从我的 masternode 为 master 和 slave 执行 ssh，但是如果我尝试从 slave 节点执行 ssh master，它会要求 pwd。这是没有在从节点中启动守护进程的问题吗？我们是否需要在 master 和 slave 上都不需要密码 ssh？

来自从节点的 ssh 从节点不要求 pwd 只要求主节点。请给我一些解决方案，为什么我无法从主节点启动从节点中的进程？

Answer 1

你不需要从slave到master的无密码ssh，只需要从master到slave。

需要考虑的几点：

• 可以在从节点本地运行hadoop吗？
• 从节点是否包含在主节点的$HADOOP_CONF_DIR/slaves文件中？
• 你是否在master的/etc/hosts文件中添加了slave节点？
• slave的日志文件中是否有错误信息？
• 是否在两台机器的同一路径上安装了相同版本的 hadoop？