修改spark-class脚本 ,这个脚本在spark安装目录下的bin目录中。

修改最后两行:

done < <("$RUNNER" -cp "$LAUNCH_CLASSPATH" org.apache.spark.launcher.Main "$@")
修改为:
done < <("$RUNNER" -cp "$LAUNCH_CLASSPATH" org.apache.spark.launcher.Main $JAVA_OPTS "$@")
这就要求Spark在执行任务之前将JAVA_OPTS变量考虑进来。我们就可以为应用程序添加JVM参数啦。
修改完成后,在命令行中执行以下命令:

export JAVA_OPTS="$JAVA_OPTS -Xdebug -Xrunjdwp:transport=dt_socket,server=y,suspend=y,address=5005"
这就设置好了当前的临时JVM变量。

相关文章:

  • 2022-12-23
  • 2021-09-28
  • 2022-01-17
  • 2021-10-18
  • 2022-12-23
  • 2021-08-06
  • 2021-12-26
  • 2021-07-21
猜你喜欢
  • 2021-04-11
  • 2022-01-06
  • 2022-12-23
  • 2021-06-29
  • 2022-12-23
相关资源
相似解决方案