如何从Web应用程序提交作业到hadoop群集？

Question

我有一个嵌入到Apache Tomcat Web容器中的Map Reduce程序。但是，在运行程序时，它将作为本地作业运行器运行，而不是在具有jobClient的群集上运行。 请帮我把作业提交到远程集群。什么是提交作业和配置设置到Java程序的过程？

Answer 1

当Hadoop找不到配置时，将以本地模式运行。当它可以找到它时，它需要其中包括JobTracker的地址
您可以在/ etc/hadoop/conf /目录下放置mapred-site xml
或在作业配置中明确设置JobTracker URL。