使用具有SparkR的Jupyter笔记本

Question

我想使用带SparkR的Jupyter笔记本，我想在安装在我的Spark群集上的Jupyter上安装IR内核。

我可以找到使用Jupyter与pySpark，但不是SparkR的帮助。

我在AWS-EMR集群上创建了我的Spark集群。

Answer 1

如果不是必须使用IRkernel，使用Jupyter星火你应该考虑安装Apache Toree内核：https://toree.incubator.apache.org/

这个内核将允许你一个Jupyter笔记本使用任何星火原料药星火连接。它还允许使用魔法（例如％pyspark或％sparkr）在单个笔记本的不同单元格之间切换语言。