什么是 Spark 的 TaskScheduler?

提问者:帅平 问题分类:面试刷题
什么是 Spark 的 TaskScheduler?
1 个回答
等你许久
等你许久
Spark的TaskScheduler是一个负责将作业拆分成任务并将任务分配给集群中的可用执行器的组件。它管理了调度Spark集群中的任务执行,并与集群管理器协同工作以分配资源。
TaskScheduler将作业拆分成任务并将它们提交给执行器以运行。它通过使用集群管理器来获得关于集群资源使用的信息,以便有效地将任务分配给执行器。
发布于:1年前 (2023-03-27) IP属地:四川省
我来回答