Doris基础学习系列(十八)doris数据还原
在doris中我们有时候需要恢复备份的数据,这里的数据还原在之前的文章里面有介绍过,可以看下这篇文章《doris如何为库表进行还原》。备注:1、doris的数据还原主要还是从hadoop的hdfs文件系统里面进行恢复...
在doris中我们有时候需要恢复备份的数据,这里的数据还原在之前的文章里面有介绍过,可以看下这篇文章《doris如何为库表进行还原》。备注:1、doris的数据还原主要还是从hadoop的hdfs文件系统里面进行恢复...
关于doris的数据备份文章其实有在之前编写,可以直接看这篇文章《doris如何为库表进行备份》。备注:1、doris的数据备份主要是备份到hdfs系统中,因此需要一个hadoop的环境2、doris的备份hadoo...
最近在编写doris相关的文章,需要使用到Datax的doriswriter。但是Doriswriter本身不提供下载,只能使用源码编译,因此这里我们来编译下。下面演示下具体的步骤。一、把datax和doris的源码...
在前面我们介绍了一些doris的数据导入方式,这篇文章我们再介绍一个使用Datax的方式把数据导入到doris中去。datax是阿里巴巴开源的一款数据迁移工具,在工作中我们经常会使用到。他可以从一个数据源把数据写入另...
在Doris中,提供直接从mysql中拿取实时数据。他的主要原理就是使用canal作为mysql的slave节点服务器,然后doris相当于是客户端去canal服务器上订阅数据,然后把数据写入到doris中。此方式导...
在前面我们介绍了好几种doris的数据导入方式,本篇文章我们介绍下使用Kafka订阅的方式导入数据。使用kafka订阅的方式导入数据主要是依靠doris的Routine Load功能。只要用户在doris中创建相关的...
在上一篇文章我们介绍了使用HdfsLoad的方式导入hdfs中的数据,这篇文章我们介绍下使用BrokerLoad的方式导入hdfs中的数据。BrokerLoad导入数据的方式和hdfsLoad导入数据的方式都差不多,...
上一篇我们介绍了使用StreamLoad导入本地的数据,这篇文章我们介绍下使用HdfsLoad导入hadoop中的数据。下面直接开始演示:一、在doris中创建一张表CREATE TABLE `user` ( `id...
最近写doris相关的文章,需要使用到hadoop,因此这里我们使用docker简单的部署一个hadoop的单机环境一、拉取镜像docker pull sequenceiq/hadoop-docker:2.6.0二、...
从本篇文章开始,我们接下来会介绍各种导入数据的方式,本篇介绍使用StreamLoad方式导入本地数据。本篇使用的核心其实主要是通过doris提供的http接口进行导入数据。具体对应的节点和端口如下:1、fe节点提供的...
在Doris中还提供了一种Bitmap索引。这是一种特殊的数据库索引技术。他主要是对表里的每一列的每一个键值建立一个位图(bit数组)。Bitmap索引的优点:1、体积小,占用存储空间比较少 2、创建索引的速度非常快...
前面我们介绍了doris的前缀索引。这里我们在介绍下doris提供的BloomFilter索引。这个BloomFilter索引不是像前缀索引那样是doris自带的,这个BloomFilter需要用户自己去创建。他的核...
在上一篇文章介绍Rollup的时候,我们有提到过Doris的前缀索引,这篇文章我们介绍下Doris的前缀索引。首先介绍下前缀索引首先回顾一下,在mysql中我们创建一张表之后,我们可以在某些字段上面创建索引,有单字段...
在Doris中,我们会经常使用到Rollup,用来做查询优化。那什么是Rollup呢?Rollup其实在doris的基础表上层架构的一层物理表,他的主要功能有:提取基础表的某一部分数据、通过改变字段顺序提升查询速度等...