热文Doris基础学习系列(二十四)doris的Join优化之Bucket Shuffle Join 在doris中,默认的join方式主要是两种,一种是Broadcast Join,另外一种是Shuffle Join。但是在doris中还支持其他的Join方式,例如:Colocate Join和Bucket Shu... Raedoris系列2022-11-091184 阅读0 评论
热文Doris基础学习系列(二十三)doris的分区缓存 在日常的业务中,我们经常会遇到这样的场景,例如查询最近7天每天的新增用户数,那么这时候的sql样例如下:SELECT date,count(userid) FROM demo.user WHERE date>="20... Raedoris系列2022-11-091039 阅读0 评论
热文Doris基础学习系列(二十二)doris的表临时分区 上一篇我们介绍了doris的动态分区,这篇文章我们介绍下doris的临时分区。首先,临时分区是使用在哪些场景里面呢?在这里给大家介绍下:场景一:原来的某一张表的某一部分分区数据有误,需要重新导入,常规的操作就是先删除... Raedoris系列2022-11-091448 阅读0 评论
热文Doris基础学习系列(二十一)doris的表动态分区 在大数据的领域里面,我们经常会听说分区的概念,例如hive的分区是我们经常遇到的。今天介绍下Doris的动态分区。Doris的分区partition在前面已经介绍过了,暂时不做过多的介绍。我们知道在doris中创建表... Raedoris系列2022-11-091681 阅读0 评论
热文Doris基础学习系列(二十)doris的Sequence列 这篇文章我们介绍下Doris的Sequence列。这个列的作用主要是相当于给某张表的数据添加一个版本号。类似于我们在做分布式高并发的时候,会在数据库的表里面添加一个version的乐观锁字段。这样子每次插入的时候都需... Raedoris系列2022-11-091434 阅读0 评论
热文Doris基础学习系列(十九)doris的数据更新 在doris中,我们有时候会涉及到对表里面的数据进行更新的操作,例如我们有一张user表:此时我们发现在原始记录里面id为1的用户,他的姓名应该是张三,所以我们需要把这个id为1的记录的name修改为张三,此时我们只... Raedoris系列2022-11-091377 阅读0 评论
热文Doris基础学习系列(十八)doris数据还原 在doris中我们有时候需要恢复备份的数据,这里的数据还原在之前的文章里面有介绍过,可以看下这篇文章《doris如何为库表进行还原》。备注:1、doris的数据还原主要还是从hadoop的hdfs文件系统里面进行恢复... Raedoris系列2022-11-091032 阅读0 评论
热文Doris基础学习系列(十七)doris数据备份 关于doris的数据备份文章其实有在之前编写,可以直接看这篇文章《doris如何为库表进行备份》。备注:1、doris的数据备份主要是备份到hdfs系统中,因此需要一个hadoop的环境2、doris的备份hadoo... Raedoris系列2022-11-091535 阅读0 评论
热文Doris基础学习系列(十六)使用Datax的方式导入数据 在前面我们介绍了一些doris的数据导入方式,这篇文章我们再介绍一个使用Datax的方式把数据导入到doris中去。datax是阿里巴巴开源的一款数据迁移工具,在工作中我们经常会使用到。他可以从一个数据源把数据写入另... Raedoris系列2022-11-072626 阅读0 评论
热文Doris基础学习系列(十五)使用canal订阅binlog的方式导入数据 在Doris中,提供直接从mysql中拿取实时数据。他的主要原理就是使用canal作为mysql的slave节点服务器,然后doris相当于是客户端去canal服务器上订阅数据,然后把数据写入到doris中。此方式导... Raedoris系列2022-11-041915 阅读0 评论
热文Doris基础学习系列(十四)使用Kafka订阅的方式导入数据 在前面我们介绍了好几种doris的数据导入方式,本篇文章我们介绍下使用Kafka订阅的方式导入数据。使用kafka订阅的方式导入数据主要是依靠doris的Routine Load功能。只要用户在doris中创建相关的... Raedoris系列2022-11-041737 阅读0 评论
热文Doris基础学习系列(十三)使用BrokerLoad方式导入hdfs中的数据 在上一篇文章我们介绍了使用HdfsLoad的方式导入hdfs中的数据,这篇文章我们介绍下使用BrokerLoad的方式导入hdfs中的数据。BrokerLoad导入数据的方式和hdfsLoad导入数据的方式都差不多,... Raedoris系列2022-11-041485 阅读0 评论
热文Doris基础学习系列(十二)使用HdfsLoad方式导入Hdfs中的数据 上一篇我们介绍了使用StreamLoad导入本地的数据,这篇文章我们介绍下使用HdfsLoad导入hadoop中的数据。下面直接开始演示:一、在doris中创建一张表CREATE TABLE `user` ( `id... Raedoris系列2022-11-031643 阅读0 评论
热文Doris基础学习系列(十一)使用StreamLoad方式导入本地数据 从本篇文章开始,我们接下来会介绍各种导入数据的方式,本篇介绍使用StreamLoad方式导入本地数据。本篇使用的核心其实主要是通过doris提供的http接口进行导入数据。具体对应的节点和端口如下:1、fe节点提供的... Raedoris系列2022-11-031479 阅读0 评论
热文Doris基础学习系列(十)doris的Bitmap索引介绍 在Doris中还提供了一种Bitmap索引。这是一种特殊的数据库索引技术。他主要是对表里的每一列的每一个键值建立一个位图(bit数组)。Bitmap索引的优点:1、体积小,占用存储空间比较少 2、创建索引的速度非常快... Raedoris系列2022-11-031235 阅读0 评论