Spark1.0.0 应用程序部署工具spark-submit怎么用
.
Spark1.0.0 应用程序部署工具spark-submit是一个命令行工具,可以用来提交Spark应用程序。spark-submit支持多种不同的应用程序部署模式,包括:
1. 在本地运行应用程序。
2. 通过Spark Standalone部署应用程序。
3. 通过YARN部署应用程序。
4. 通过Mesos部署应用程序。
spark-submit的基本语法如下:
spark-submit [options] [app arguments]
其中,是应用程序的jar包或者python文件,[app arguments]是应用程序的参数。
spark-submit支持的选项包括:
1. --master
2. --deploy-mode
3. --class
4. --name
5. --jars
6. --py-files
7. --files
8. --conf
9. --properties-file
相关文章