1 个回答
Spark 的 Shuffle Write Metrics 用于监控和调优 Spark 中的 Shuffle Write 过程,Shuffle Write 是指在 Map 阶段结束后将 Map 结果按照 key 进行排序并写入磁盘的过程,该过程可能成为 Spark 应用中的瓶颈之一。
发布于:2年前 (2023-03-27) IP属地:四川省
我来回答
您需要 登录 后回答此问题!