代码之家 › 专栏 › 技术社区 › Goran

在IP而不是主机名上启动Spark master

apache-spark

0

Goran · 技术社区 · 6 年前

我正试图在ubuntu18上建立一个远程spark2.4.5集群。在我开始之后 ./sbin/stat-master.sh WebUI可在 <INSTANCE-IP>:8080 但它显示的是“火花大师”spark://星火大师:7077“其中 spark-master 是远程计算机上的主机名。

我可以开始工作 ./sbin/start-slave.sh spark://spark-master:7077 只是,但是 <INSTANCE-IP>:4040 ./sbin/start-slave.sh spark://<INSTANCE-IP>:7077 我可以看到进程,但在WebUI中看不到worker。

因此,我无法使用从本地计算机连接到群集 spark-shell --master spark://<INSTANCE-IP>:7077 . 错误是:

StandaloneAppClient$ClientEndpoint: Failed to connect to master <INSTANCE-IP>:7077

0 回复 | 直到 6 年前