spark-submit工具参数说明执行时需要传入的参数说明Usage:spark-submit[options]<appjar|pythonfile>[appoptions]参数名称含义--masterMASTER_URL可以是spark://host:port,mesos://host:port,yarn,yarn-cluster,yarn-client,local--deploy-modeDEPLOY_MODEDriver程序运行的地方，client或者cluster--classCLASS_NAME主类名称，含包名--nameNAMEApplication名称--jarsJARSDriver依赖的第三方jar包--py-filesPY_FILES用逗号隔开的放置在Python应用程序PYTHONPATH上的.zip,.egg,.py文件列表--filesFILES用逗号隔开的要放置在每个executor工作目录的文件列表--properties-fileFILE设置应用程序属性的文件路径，默认是conf/spark-defaults.conf--driver-memoryMEMDriver程序使用内存大小--driver-java-options--driver-library-pathDriver程序的库路径--driver-class-pathDriver程序的类路径--executor-memoryMEMexecutor内存大小，默认1G--driver-coresNUMDriver程序的使用CPU个数，仅限于SparkAlone模式--supervise失败后是否重启Driver，仅限于SparkAlone模式--total-executor-coresNUMexecutor使用的总核数，仅限于SparkAlone、SparkonMesos模式--executor-coresNUM每个executor使用的内核数，默认为1，仅限于SparkonYarn模式--queueQUEUE_NAME提交应用程序给哪个YARN的队列，默认是default队列，仅限于SparkonYarn模式--num-executorsNUM启动的executor数量，默认是2个，仅限于SparkonYarn模式--archivesARCHIVES仅限于SparkonYarn模式