Doris的数据导入方式有很多种,分别适合哪些场景?

提问者:帅平 问题分类:数据库
Doris的数据导入方式有很多种,比如:stream load, Broker Load, Routine Load,Insert Into。这些导入方式分别适合哪些场景?
1 个回答
扎起头发是矫情
扎起头发是矫情
Stream Load导入方式适合的情况如下:
使用场景:本地文件/程序写入。建议单次导入的数据小于10GB,可导入CSV,JSON,PARQUET,ORC格式的文件
Broker Load导入方式适合的情况如下:
使用场景:对象存储/hdfs,单次导入数据可达数百GB,支持的格式有:CSV,JSON,Parquet,ORC
Routine Load导入方式适合的情况如下:
使用场景:kafka实时导入,一般是微批方式导入MB到GB级别的数据,支持的格式有:CSV,JSON
insert into导入方式适合的情况如下:
使用场景:jdbc接口/外部表/对象存储/hdfs,单次导入视情况而定
最后特别说明下,一般不建议使用insert into values的方式进行导入,但是可以使用insert int table as select的方式导入。
发布于:1个月前 (03-26) IP属地:
我来回答