本地提交可以spark 程序可以,提交到服务端报错

收藏

本地提交可以spark 程序可以,提交到服务端报错

回答

般若回答

问题分析:  提交服务端需要指定excutor的大小s
解决方法:
因为虚拟机设置的内存1G 处理器1核
bin/spark-submit --class cn.itcast.spark.WordCount --master spark://hadoop01:7077 --executor-memory 512m --total-executor-cores 2 /spark-1.0-SNAPSHOT.jar hdfs://hadoop01:9000/wordcout.txt hdfs://hadoop01:9000/out22222

 

(5)

提交成功