2016-08-22 46 views
0

我目前正在为MapReduce运行Apache Ignite Hadoop加速器。作业运行,但我无法在JobHistoryServer中看到它们。我不希望看到Yarn的资源管理器中的工作(而不是)。Apache Ignite Hadoop加速器MapReduce作业不在JobHistory服务器中

我跑我的MapReduce作业像 hadoop --config path/to/config/ jar path/to/jar ....

在mapred-site.xml中,我已经添加

<property> 
    <name>mapreduce.framework.name</name> 
    <value>ignite</value> 
</property> 
<property> 
    <name>mapreduce.jobtracker.address</name> 
    <value>[your_host]:11211</value> 
</property> 

我mapreduce.jobhistory。*的设置没有改变。

在核site.xml中我已经添加

<property> 
    <name>fs.default.name</name> 
    <value>igfs://[email protected]/</value> 
</property> 
<property> 
    <name>fs.igfs.impl</name> 
    <value>org.apache.ignite.hadoop.fs.v1.IgniteHadoopFileSystem</value> 
</property> 
<property> 
    <name>fs.AbstractFileSystem.igfs.impl</name> 
    <value>org.apache.ignite.hadoop.fs.v2.IgniteHadoopFileSystem</value> 
</property> 

我还添加了点燃核-1.6.0.jar,点燃-Hadoop的1.6.0.jar和ignite- shmem-1.0.0.jar到$ HADOOP_HOME路径。同样,我已经导出了HADOOP_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME和HADOOP_MAPRED_HOME。

Ignite不支持此功能吗?或者我做错了什么?

另外,有没有一种方法来跟踪在Ignite上运行的MapReduce作业?

回答

相关问题