【问题标题】:Can't start master and slave, strange thing named "bogon" in the log无法启动主从,日志中有奇怪的东西叫“bogon”
【发布时间】:2014-07-24 03:23:42
【问题描述】:

我为 hadoop 2.2 文件下载了一个新的预构建 spark。在this 文档之后,我想在我的单机上启动我的主人。解压文件后,我进入sbin和start-master,但是我遇到了这个奇怪的问题,这里是日志:

Spark Command: /Library/Java/JavaVirtualMachines/jdk1.7.0_55.jdk/Contents/Home/bin/java -cp :/opt/spark-0.9.0-incubating-bin-hadoop2/conf:/opt/spark-0.9.0-incubating-bin-hadoop2/assembly/target/scala-2.10/spark-assembly_2.10-0.9.0-incubating-hadoop2.2.0.jar -Dspark.akka.logLifecycleEvents=true -Djava.library.path= -Xms512m -Xmx512m org.apache.spark.deploy.master.Master --ip bogon --port 7077 --webui-port 8080
========================================

log4j:WARN No appenders could be found for logger (akka.event.slf4j.Slf4jLogger).
log4j:WARN Please initialize the log4j system properly.
log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.
Exception in thread "main" org.jboss.netty.channel.ChannelException: Failed to bind to: bogon/125.211.213.133:7077
    at org.jboss.netty.bootstrap.ServerBootstrap.bind(ServerBootstrap.java:272)
    at akka.remote.transport.netty.NettyTransport$$anonfun$listen$1.apply(NettyTransport.scala:391)
    at akka.remote.transport.netty.NettyTransport$$anonfun$listen$1.apply(NettyTransport.scala:388)
    at scala.util.Success$$anonfun$map$1.apply(Try.scala:206)

bogon 是什么? IP 125.211.213.133(不是我的 IP)来自哪里?这里有什么问题?

【问题讨论】:

  • "bogon" 只是表示“虚拟”或“你应该用你的真实价值替换它”

标签: hadoop apache-spark


【解决方案1】:

“bogon”来自提供的命令行。您可能忘记将参数--ip 替换为您主机的本地ip。

使用 sbin/start-master.sh 时,如果没有提供 IP,则使用机器上报的主机名: start-master.sh

if [ "$SPARK_MASTER_IP" = "" ]; then
  SPARK_MASTER_IP=`hostname`
fi

如果报告的主机名不正确,您可以通过设置 env 变量为 Spark 提供 IP。

SPARK_MASTER_IP=172.17.0.1 start-master.sh

【讨论】:

  • @massg 谢谢你的帮助。但我刚刚执行了start-master.sh。我没有输入整个命令。
  • @hakunami 更新了答案,提供了 IP 地址设置的详细信息。
【解决方案2】:

如果您是 linux 环境,请运行命令 hostname 检查您的主机名。而且我认为 125.211.213.133 是 bogon 的 IP,而您错误地将主机名设置为“bogon”。

为了快速修复,您可以运行命令hostname localhost 并重试。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2017-12-08
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2011-07-11
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多