1 Dinky 实时计算平台系列（二十三）Dinky0.x版本升级到1.0版本的踩坑之路 1.23 K 2 Dinky 实时计算平台系列（二十二）FlinkSql作业开发之FlinkSql-cdc + doris 1.94 K 3 Dinky 实时计算平台系列（二十一）FlinkSql作业开发之FlinkSql-cdc + kafka 1.17 K 4 Dinky 实时计算平台系列（二十）FlinkSql作业开发之FlinkSql-cdc 914 5 Dinky 实时计算平台系列（十九）FlinkSql作业开发之FlinkSql-Kafka 1.45 K
繁
全部 面试刷题 微服务 数据库 消息队列 搜索引擎 大数据 运维 go语言 人工智能

Spark的shuffle操作是什么？

提问者：帅平 问题分类：面试刷题
Spark的shuffle操作是什么？
Spark面试题
发布于：2年前 (2023-03-27) IP属地：四川省
1 个回答
得治
得治
在Spark中，Shuffle操作是指将数据重新分配并组合以进行聚合操作的过程。Shuffle操作通常会在Spark中产生大量的网络I/O，因此，了解shuffle操作的工作原理是优化Spark应用程序性能的关键之一。
发布于：2年前 (2023-03-27) IP属地：四川省
我来回答