2015-12-26 35 views
0

我在远程集群设置(4个节点)上运行Spark应用程序。无法在纱线模式下访问Spark web-ui

当我运行在当地模式在远程计算机上使用以下命令的应用程序,

spark-submit --class "Main" --master local[*] target/scala-2.10/myapponspark_2.10-1.0.jar 

我得到日志下面的消息,

INFO ui.SparkUI: Started SparkUI at http://ab2.xxx.in.yyy.com:4041 

和我能够访问Spark网络用户界面http://ab2.xxx.in.yyy.com:4041

然而,当我在纱的客户端(或纱线集群)由发出以下命令

spark-submit --class "Main" --master yarn-client target/scala-2.10/myapponspark_2.10-1.0.jar 

相同的日志消息出现,说明星火网络用户界面运行模式开始在同一地址如上。但我无法从浏览器访问网页。可能是什么原因?

+0

你的工作是否在纱线模式中没有任何错误完成? – Sumit

+0

@Sumit它确实完成 – CRM

+0

您是从机器还是从提交作业的机器访问浏览器? – Chandan

回答

0

尝试从提交Spark作业的机器访问浏览器。或SSH使用以下命令

$ssh -X [email protected]_address 

,然后从远程使用

$firefox & 

可能是你可以查看星火UI打开Firefox浏览器。

相关问题