全部面试刷题微服务数据库消息队列搜索引擎大数据运维 go语言机器学习

Spark的数据倾斜是什么？

提问者：帅平问题分类：面试刷题

Spark的数据倾斜是什么？

Spark面试题

发布于：6个月前 (03-27) IP属地：四川省

1 个回答

你我这辈子最的依靠

Spark的数据倾斜是指在数据处理过程中，某些分区的数据量远远大于其他分区，导致某些任务的处理时间明显长于其他任务，从而影响整个Spark作业的性能。数据倾斜是Spark中的常见问题之一，需要采取相应措施来解决。

发布于：6个月前 (03-27) IP属地：四川省

我来回答