使用纱线集群

提交作业在星火我不能提交作业纱cluster.The作业下yarn-client选项罚款运行。当提交到yarn-cluster时，只有这个日志多次出现。使用纱线集群

Application report for application_1421828570504_0002 (state: ACCEPTED)

并因以下例外而失败。

diagnostics: Application application_1421828570504_0002 failed 10 times due to AM Container for app 
attempt_1421828570504_0002_000010 exited with exitCode: 1 due to: Exception from container-launch: org.apache.hadoop.util.Shell$ExitCodeException: 
org.apache.hadoop.util.Shell$ExitCodeException:

来源

2015-01-21 Rahul

欢迎光临！据我所知，例外是告诉你，退出代码非零退出。除非你幸运，有人想出了一个很好的猜测，否则我认为你需要看看日志，并找出失败的原因并希望_why_。 – 2015-01-21 20:50:27

你应该看看你的应用程序的日志：

> yarn logs --applicationId application_1421828570504_0002

这将产生火花集装箱内实际运行的一些调试信息。由于它在本地运行，但不在集群上，我的猜测是缺少SparkContext定义。看看我的answer to this question的修复。

来源

2015-11-26 10:31:56

使用纱线集群

回答

相关问题