Spark中的资源调度器是什么

lewis 2020-02-08 19次阅读

在Spark中,资源调度器是负责管理和分配集群资源的组件。它负责将任务分配给集群中的各个节点,以确保任务在可用资源上得到有效执行。Spark中有多种资源调度器可供选择,包括本地模式、Standalone模式、YARN和Mesos等。用户可以根据自己的需求和集群环境选择适合的资源调度器。资源调度器在Spark中起着至关重要的作用,能够提高任务执行的效率和性能。



发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。