如何将MLlib Apache Spark库安装到JAVA Eclpise项目中？

Question

我想为我的Java项目使用Spark MLlib库实现一些机器学习算法。我尝试了几个教程没有成功。

我习惯使用eclipse，并且很惊讶它很难建立。我的假设是，我只需要从here下载库并将该jar添加到我的构建路径中，但显然它似乎更困难。

Answer 1

创建一个maven项目并添加以下依赖关系（适用于Spark latest 2.0.0）。您可以从eclipse中运行简单的程序（如JavaALSExample.java）开始。

https://github.com/apache/spark/blob/master/examples/src/main/java/org/apache/spark/examples/ml/JavaALSExample.java

有可在火花的github仓库，你可以参考更多的Java样本。希望这可以帮助。

<dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-core_2.11</artifactId> 
     <version>2.0.0</version> 
    </dependency> 
    <dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-mllib_2.11</artifactId> 
     <version>2.0.0</version> 
    </dependency> 
    <dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-sql_2.11</artifactId> 
     <version>2.0.0</version> 
</dependency>