如何将mac连接到hadoop/hdfs集群

Question

我有CDH在集群中运行，我有ssh访问机器。我需要将我的Mac连接到群集，因此如果我使用hadoop fs -ls，它应该显示群集的内容。 我已将HADOOP_CONF配置为指向群集的配置。我正在群集中运行CDH4。我在这里错过了什么，可以连接吗？

是否有一些我需要做的ssh密钥设置？

Answer 1

有一些事情你需要确保做到这一点：

1. 你需要设置你的HADOOP_CONF_DIR环境变量指向携带配置个XML指向集群目录。
2. 您的Mac应该能够直接访问组成您的群集的主机（全部）。例如，这可以通过VPN完成 - 如果群集是从外部网络保护的。
3. 您的Mac应该携带集群运行的相同版本的Hadoop。