如何发现定位Flink job任务是否出现数据倾斜?

提问者:帅平 问题分类:面试刷题
如何发现定位Flink job任务是否出现数据倾斜?
1 个回答
我是蓝天i
我是蓝天i
相同 Task 的多个 Subtask 中,个别Subtask 接收到的数据量明显大于其他 Subtask 接收到的数据量,通过 Flink Web UI 可以精确地看到每个 Subtask 处理了多少数据,即可判断出 Flink 任务是否存在数据倾斜。通常,数据倾斜也会引起反压。
发布于:3个月前 (02-06) IP属地:四川省
我来回答