全部面试刷题微服务数据库消息队列搜索引擎大数据运维 go语言机器学习

我们数据量太大了，每天每个分区大概有500多G，我采用s3 的 table value function 读不了，过滤查询好像也不行

提问者：帅平问题分类：数据库

我们数据量太大了，每天每个分区大概有500多G，我采用s3 的 table value function 读不了，过滤查询好像也不行，这种我直接把500G拉倒本地，然后stream load也是一笔不小的开销啊，有没有什么好的方法啊

Doris

发布于：4个月前 (12-21) IP属地：未知

2 个回答

命里最重要的人

如果是数据源Kafka,可以采用routine load

发布于：4个月前 (12-21) IP属地：未知

到头来只是玩笑一场

内网还好外网够呛

发布于：4个月前 (12-21) IP属地：未知

我来回答