我目前正在为MapReduce运行Apache Ignite Hadoop加速器。作业运行,但我无法在JobHistoryServer中看到它们。我不希望看到Yarn的资源管理器中的工作(而不是)。Apache Ignite Hadoop加速器MapReduce作业不在JobHistory服务器中
我跑我的MapReduce作业像 hadoop --config path/to/config/ jar path/to/jar ....
在mapred-site.xml中,我已经添加
<property>
<name>mapreduce.framework.name</name>
<value>ignite</value>
</property>
<property>
<name>mapreduce.jobtracker.address</name>
<value>[your_host]:11211</value>
</property>
我mapreduce.jobhistory。*的设置没有改变。
在核site.xml中我已经添加
<property>
<name>fs.default.name</name>
<value>igfs://[email protected]/</value>
</property>
<property>
<name>fs.igfs.impl</name>
<value>org.apache.ignite.hadoop.fs.v1.IgniteHadoopFileSystem</value>
</property>
<property>
<name>fs.AbstractFileSystem.igfs.impl</name>
<value>org.apache.ignite.hadoop.fs.v2.IgniteHadoopFileSystem</value>
</property>
我还添加了点燃核-1.6.0.jar,点燃-Hadoop的1.6.0.jar和ignite- shmem-1.0.0.jar到$ HADOOP_HOME路径。同样,我已经导出了HADOOP_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME和HADOOP_MAPRED_HOME。
Ignite不支持此功能吗?或者我做错了什么?
另外,有没有一种方法来跟踪在Ignite上运行的MapReduce作业?