Q

我可以独立运行火花而不使用oozie吗？

2017-10-04 56 views -1 likes

-1

我已经安装了oozie，并且可以在oozie工作流上运行spark工作？我可以独立运行oozie bundle中的spark库，而不直接使用oozie。我该怎么做？请用一个例子来解释。我可以独立运行火花而不使用oozie吗？

2017-10-04 dark_shadow

A

回答

3

您可以使用spark-submit在spark-shell中提交作业。检查下面的火花文档。

https://spark.apache.org/docs/latest/submitting-applications.html#launching-applications-with-spark-submit

2017-10-04 08:32:02 alexgids

+0

我还没有安装的火花，但已经安装了Oozie这让我使用它的工作流程运行火花的工作。我想在不使用oozie-workflow的情况下运行spark。 –

+0

我在任何oozie的子文件夹中都找不到spark-submit文件。那么我怎么能运行它。 –

+0

@dark_shadow据我所知Oozie是一个工作流程自动化工具。它不能独立运行火花作业。 – alexgids

相关问题