首页 文章

如何在Amazon EMR上查找spark主URL

提问于
浏览
8

我是新手,并试图在版本为1.3.1的Amazon集群上安装spark . 当我做

SparkConf sparkConfig = new SparkConf().setAppName("SparkSQLTest").setMaster("local[2]");

它对我有用,但我知道这是为了测试目的我可以设置本地[2]

当我尝试使用群集模式时,我将其更改为

SparkConf sparkConfig = new SparkConf().setAppName("SparkSQLTest").setMaster("spark://localhost:7077");

有了这个我得到低于错误

试图与无法访问的远程地址关联[akka.tcp:// sparkMaster @ localhost:7077] . 地址现在被封闭了5000毫秒,所有发送到此地址的消息都将被发送到死信 . 原因:连接被拒绝15/06/10 15:22:21 INFO client.AppClient $ ClientActor:连接到master akka.tcp:// sparkMaster @ localhost:7077 / user / Master ..

有人可以让我如何设置主网址 .

1 回答

相关问题