热文构建一个完整的数据仓库(十二)doris进阶之导入数据的方式(上) Rae数据仓库2022-04-201229 阅读0 评论 接上篇《构建一个完整的数据仓库(十一)doris的索引》。在前面我们在介绍doris的时候,主要使用的是insert into给大家做数据导入的演示,但是我们也说过,doris在真实的环境中,我们不会直接使用inse...
热文构建一个完整的数据仓库(十一)doris的索引 接上篇《构建一个完整的数据仓库(十)doris的数据模型》。上一篇我们介绍了doris创建表的时候需要使用的数据模型,基于数据模型,我们可以普适对应的业务。那么有了数据模型,我们肯定是需要进行查询的,所以这一篇我们来... Rae数据仓库2022-04-202329 阅读0 评论
构建一个完整的数据仓库(十)doris的数据模型 Rae数据仓库2022-04-20985 阅读0 评论 接上篇《构建一个完整的数据仓库(九)doris支持哪些数据结构?》。本篇我们介绍下doris的数据模型。本文我们在讲解doris的数据模型的时候,我们会给大家抽象的用mysql做比喻,方便大家理解。1、doris的数...
构建一个完整的数据仓库(九)doris支持哪些数据结构? 接上篇《构建一个完整的数据仓库(八)doris入门使用jdbc查询数据》。上一篇我们完成了如何创建表,查询数据等信息。今天我们来了解下doris支持哪些数据结构。我们知道在mysql里面,他支持一些数据结构,例如:i... Rae数据仓库2022-04-19982 阅读0 评论
热文构建一个完整的数据仓库(八)doris入门使用jdbc查询数据 接上篇《构建一个完整的数据仓库(七)doris入门之crud操作》,我们介绍了使用navicat来操作doris,但是最终我们还是要通过程序来进行处理,因此这里我们来写一个jdbc查询doris里面的user表数据。... Rae数据仓库2022-04-191246 阅读0 评论
热文构建一个完整的数据仓库(七)doris入门之crud操作 Rae数据仓库2022-04-191518 阅读0 评论 接上篇《构建一个完整的数据仓库(六)doris集群缩容》。之前的文章我们介绍了doris的安装,扩容,缩容。今天我们来正式开始入手操作,从最简单的curd的来进行操作。前提说明doris是一个MVPP的"数据库",他...
热文构建一个完整的数据仓库(六)doris集群缩容 接上篇《构建一个完整的数据仓库(五)doris集群扩容》。上篇文章我们介绍了doris的扩容,这里我们介绍下缩容。我们知道doris的安装和扩容的流程是:其实缩容也是同样的步骤所以这里我们介绍一下:一、删减fe节点A... Rae数据仓库2022-04-191205 阅读0 评论
热文构建一个完整的数据仓库(五)doris集群扩容 Rae数据仓库2022-04-191209 阅读0 评论 接上篇《构建一个完整的数据仓库(四)为doris环境安装hdfs_broker》。前面我们演示了doris单机的安装,同时还有broker的安装。这里我们要逐步的建立起来生产环境的演示,所以今天我们介绍下doris集...
热文构建一个完整的数据仓库(四)为doris环境安装hdfs_broker Rae数据仓库2022-04-191159 阅读0 评论 接上篇《构建一个完整的数据仓库(三)doris编译安装》。上一篇我们安装了一份doris的单机环境,并且已经启动起来了,在这里我们由于是大数据环境,所以我们需要添加一个broker,在昨天的doris目录下我们已经把...
热文构建一个完整的数据仓库(三)doris编译安装 Rae数据仓库2022-04-181713 阅读0 评论 接上篇《构建一个完整的数据仓库(二)如何打造适合公司业务的数据仓库系统》。既然我们要打扰一个数仓,那么我们接下来就来一系列实战的内容。大家如果想学习的话,从本系列第一篇开始看就好。今天来讲讲doris的安装。一、do...
热文基于Apache-doris怎么构建数据中台(八)-数仓管理 这次主要是讲述doris的数仓怎么管理 整个数仓管理系统是依赖于之前讲的数据中台第二部分数据资产管理中的元数据管理,主要是围绕Apache doris进行,不牵涉其他的数仓平台。数仓分层模型数仓分层模型的好处:1、数... Rae数据仓库2022-04-151248 阅读0 评论
热文基于Apache Doris怎么构建数据中台(七)-数据指标管理 Rae数据仓库2022-04-151215 阅读0 评论 指标体系定义指标体系是将零散单点的具有相互联系的指标,系统化的组织起来,通过单点看全局,通过全局解决单点的问题。它主要由指标和体系两部分组成。指标是指将业务单元细分后量化的度量值,它使得业务目标可描述、可度量、可拆解...
热文基于Apache doris怎么构建数据中台(六)-数据服务管理 Rae数据仓库2022-04-151159 阅读0 评论 上次讲数据质量的控制,那么针对据仓的数据及各种数据指标怎么快捷的对外提供数据服务,怎么快速的完成数据服务接口的开发,这次我们重点围绕这个进行展开。怎么实现接口开发零代码实现数据服务从字面上理解就是数据相关的服务,和业...
热文基于Apache doris怎么构建数据中台(五)-数据质量管理 Rae数据仓库2022-04-151273 阅读0 评论 上一次我们讲了,数据怎么进行快速的接入,这次我们讲在接入及后续的数据处理中质量怎么控制如何更加合理、高效的监控每类作业的运行状态,并将原本分散、孤岛式的监控日志信息通过规则引擎集中共享、关联、处理;洞察关键信息,形成...
热文基于Apache doris怎么构建数据中台(四)-数据接入系统 Rae数据仓库2022-04-151551 阅读0 评论 上一次我们讲解了数据资产,元数据管理,血缘关系等,这次我们开始将数据接入,怎么实现快速的数据接入在开发数据模型时,我们必须有一个统一的平台,能够像流水线一样,把数据一步步加工成数据模型。这其中涉及到数据萃取、数据聚合...