【问题标题】:Execute hadoop jar through Spring MVC using process command使用 process 命令通过 Spring MVC 执行 hadoop jar
【发布时间】:2015-06-26 16:35:18
【问题描述】:

我是 Java 新手,目前正在从事一个需要从 Spring MVC 应用程序触发 Hadoop 作业的项目。经理让我使用我不知道的“流程”。我已经编写了一个 shell 脚本来触发该作业,但客户端希望它直接从 Spring MVC 应用程序触发,以便可以将日志写入本地文件系统。

谁能帮助我如何通过 Java 进程在边缘节点中触发 Hadoop jar(更具体地说是具有不同参数的 Yarn 命令)?

【问题讨论】:

  • 我个人会去请您的经理指导您了解他/她所考虑的实施示例。通常,当有人说“这样做”时,他们要么知道他们在说什么,并且记住了示例代码,要么正在尝试采取聪明的行动,因为他们无法向您展示示例。好吧,或者他/她对你或成功的关心不够,无法真正帮助完成它。

标签: java hadoop process hadoop-yarn


【解决方案1】:

【讨论】:

  • 我正在尝试使用 processbuilder。但是我有一个问题,我的 tomcat 无法访问集群。所以我需要登录到 Edgenode(不同的服务器)并执行命令。我现在知道如何通过流程构建器执行命令,但是如何通过流程构建器登录到不同的服务器。 (我知道我们可以使用 Jsch,但现在只能在 processbuilder 中寻找解决方案)
猜你喜欢
  • 1970-01-01
  • 2017-02-19
  • 2016-06-29
  • 1970-01-01
  • 1970-01-01
  • 2018-04-14
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多