spark Spare pi 测试报错 master address 设置

搭建好spark 环境之后，按照网上说的用IdeaIl 运行，会报错

Exception in thread "main" org.apache.spark.SparkException: A master URL must be set
in your configuration
at org.apache.spark.SparkContext.<init>(SparkContext.scala:166)
at org.apache.spark.examples.mllib.BinaryClassification$.run(BinaryClassification

解决方案：

在例子代码中，调整

val conf = new SparkConf().setAppName("Spark Pi")

调整成

val conf = new SparkConf().setMaster("spark://10.163.209.123:7077").setAppName("Spark Pi")

其中setmaster中是 spark://master地址:端口

spark Spare pi 测试报错 master address 设置相关推荐

PI/PO 报错消息汇总-解决方法
1.报错原因:UnknownHostException,需查看网络是否配置了host 2.报错原因:ZSD_SOHEAD这个字段是必输的没有传 3.查看basic账号密码是否有修改,PO连接SAP账号 ...
Xamarin.iOS真机测试报错
Xamarin.iOS真机测试报错错误信息:The MinimumOSVersion inside Info.plist does not include the device version(er ...
Xamarin Android真机测试报错
Xamarin Android真机测试报错 Xamarin Android真机测试报错,错误信息为INSTALL_CANCELLED_BY_USER.出现这个错误,通常都是真机上开发者选项设置错误.由 ...
【GitLab】gitlab上配置webhook后，点击测试报错：Requests to the local network are not allowed...
gitlab上配置webhook后,点击测试报错: Requests to the local network are not allowed 操作如下: 报错: 错误原因: gitlab 10.6 ...
apache ab压力测试报错apr_socket_recv
apache ab压力测试报错(apr_socket_recv: Connection reset by peer (104)) apache 自带的ab工具测试,当并发量达到1000多的时候报错如下 ...
关于activeMq在本地测试报错org.apache.activemq.transport.InactivityIOException: Cannot send, channel has alrea
关于activeMq在本地测试报错org.apache.activemq.transport.InactivityIOException: Cannot send, channel has alrea ...
pytorch测试报错：RuntimeError: cuda runtime error (10) : invalid device ordinal at torch/csrc/cuda/Module
模型在服务器多gpu上训练,测试在自己台式机上进行,只有一块gpu,测试报错: File "/home/fuxueping/sdb/PycharmProjects/face_recognit ...
uni-app 推送测试报错 cid不存在或应用错误，CID不存在或不属于此应用
1.uni-app 推送测试报错解决:以安卓端为例 1.需要获取到真机上面的 cid(clientid) 2.打包一个自定义基座 3.运行>运行到手机或模拟器>运行基座选择>自定义 ...
jmeter并发测试报错
jmeter并发测试报错请大神给指点一下是因为什么报错,并发循环1-5次的时候不会报错,循环多次就开始报错了.

spark Spare pi 测试报错 master address 设置

spark Spare pi 测试报错 master address 设置相关推荐

最新文章

热门文章