Spark DAG有哪些优点？

可以对任务进行合并和剪枝，减少任务之间的依赖，提高任务的并行度和执行效率。
可以将一个大任务切分成多个小任务，将这些小任务分配到多个节点上执行，从而减少节点间的数据传输和任务调度开销。
可以将复杂的计算过程拆分成多个阶段，每个阶段分别执行，提高任务执行效率和并行度。
在 Spark 中，DAG 的构建过程是自动进行的，开发人员只需要编写数据处理逻辑即可。Spark 会根据任务之间的依赖关系构建 DAG，对 DAG 进行优化，生成最终的执行计划。因此，开发人员可以将精力集中在数据处理的业务逻辑上，无需关注任务的调度和优化细节。