本地开发spark代码上传spark集群服务并运行

打包 :右击、export、Java 、jar File 

本地开发spark代码上传spark集群服务并运行

本地开发spark代码上传spark集群服务并运行

把TestSpark.jar包上传到spark集群服务器的 spark_home下的myApp下:
本地开发spark代码上传spark集群服务并运行

提交spark任务:


  1. cd /usr/local/spark/spark-2.1.1-bin-hadoop2.7
  2. bin/spark-submit --class "ClusterWordCount" --master local[4] myApp/TestSpark.jar