spark submit参数的作用是什么

lewis 2020-02-02 18次阅读

Spark submit参数的作用是用来提交Spark应用程序的配置参数。通过Spark submit命令,用户可以指定应用程序的运行方式,包括应用程序的主类、jar包路径、运行模式、资源分配等。可以通过设置不同的参数来控制Spark应用程序的执行方式,以及优化应用程序的性能。常见的Spark submit参数包括–class、–master、–deploy-mode、–driver-memory、–executor-memory等。



发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。