1 个回答
使用insert into select方式导入数据慢的排查方向如下:
1、利用 SET dry_run_query = true 先运行查询,确认是否为查询慢导致。
2、如果是 Doris 2.0 到 2.1.3 之间的版本,设置 enable_nereids_dml = true,启用新最优化器。2.1.3之后默认开启了。
3、2.1 以上 set enable_memtable_on_sink_node = false 测试下非前移对导入的影响。
4、2.1 以上 Set enable_strict_consistency_dml = false 测试下关 shuffle对导入的影响。
5、非 pipeline 模式调大 parallel_fragment_exec_instance_num 增大并发
6、Pipeline 模式调大 parallel_pipeline_task_num 增大并发
7、通过设置 enable_profile = true 获取导入的 Profile 来具体分析分析慢的原因
发布于:4个月前 (01-14) IP属地:四川省
我来回答
您需要 登录 后回答此问题!