热文DataHub开源数据治理实战(二)DataHub安装部署 本文我们介绍下DataHub的安装部署。对于DataHub来说,安装部署非常简单,直接使用docker即可,所以这里我们部署DataHub之前需要准备必要的环境:1、python3 2、docker 3、docker... Rae数据仓库系列2024-02-181849 阅读0 评论
热文DataHub开源数据治理实战(一)DataHub介绍 在之前我们介绍了atlas的血缘关系,详见《Apache Atlas血缘关系实战》。由于服务器配置比较低,无法演示,所以Atlas相关的系列没有写完,在实际的业务中,其实我们也没有使用atlas,主要的原因是:1、比... Rae数据仓库系列2024-02-181379 阅读0 评论
热文Doris基础学习系列(四十九)Doris使用规范 目前随着doris的使用范围越来越广,那么对于初次接触到doris的用户来说,我们建议提前熟悉下相关的规范,这样可以避免后续出现各种问题。本文的话,我们从三个方面来介绍下doris的使用规范:1、字符集规范 2、建表... Raedoris系列2023-12-201617 阅读0 评论
热文Doris在生产环境中的一些最佳实践 大家好,一些经验和教训,总结一下,大家直接领走。 前缀索引 不同于传统的数据库设计,Doris 不支持在任意列上创建索引。Doris 这类 MPP 架构的 OLAP 数据库,通常都是通过提高并发,来处理大量数据的。 ... Raedoris系列2023-12-071173 阅读0 评论
热文Apache Atlas血缘关系实战(四)atlas核心概念介绍 在前面我们已经安装部署好了atlas,并且也导入了演示数据,同时我们可以通过演示数据查看表与表之间,列与列之间的血缘关系。随后我们会演示如何自定义的创建一套自定义的血缘关系,在介绍之前,我们首先介绍一些atlas的核... Rae数据仓库系列2023-11-151783 阅读0 评论
热文Apache Atlas血缘关系实战(一)血缘关系介绍 在本站我们介绍过一些数仓相关的知识点,但是对于在中型企业或者中大型企业甚至大企业的人来说,整个的数据仓库体系是非常大的,这里的数据来源,数据使用等等信息越往后做约复杂,所以如果涉及到那块的数据如果出现错误或者偏差的时... Rae数据仓库系列2023-11-141273 阅读0 评论
热文Doris基础学习系列(四十八)Doris部署be节点配置参考 在日常中,我们经常会涉及到手动的部署doris,目前主要的流行方式是:1、使用operator在kubernetes中部署 2、使用doris-manager部署 3、使用传统方式进行部署目前使用较多的还是以传统方式... Raedoris系列2023-10-161862 阅读0 评论
热文Doris基础学习系列(四十七)Doris部署fe节点配置参考 在日常中,我们经常会涉及到手动的部署doris,目前主要的流行方式是:1、使用operator在kubernetes中部署 2、使用doris-manager部署 3、使用传统方式进行部署目前使用较多的还是以传统方式... Raedoris系列2023-10-161720 阅读0 评论
热文Doris基础学习系列(四十六)Doris从jdbc的catalog多数据源目录导入数据 在实际的情况下,我们经常会涉及到做数仓,那么数据同步就是一个很大的事情,目前基于数仓的产品的话,大部分都是使用doris来进行做数仓的构建,因此这里的话我们来演示下案例,就是从Doris的jdbc的catalog多数... Raedoris系列2023-09-082245 阅读0 评论
热文Doris基础学习系列(四十五)Doris的分词测试 在Doris中我们如果使用倒排索引的话,那么对应部分字段我们会涉及到分词,本文的话,我们来介绍下分词的使用测试案例。1)测试中文细粒度分词SELECT TOKENIZE('中华人民共和国','"parser"="ch... Raedoris系列2023-09-051651 阅读0 评论
热文Doris基础学习系列(四十四)Doris倒排索引的增删改查 在前面我们演示的是在创建表的时候创建倒排索引,但是有时候我们会涉及到此表已经存在了,那么我们需要子安后序中对倒排索引进行操作,下面我们就来列举下doris的倒排索引增删改查。1)查看所有的倒排索引show creat... Raedoris系列2023-09-051458 阅读0 评论
热文Doris基础学习系列(四十三)Doris如何使用倒排索引 上一篇文章《Doris系列(四十二)Doris的倒排索引介绍》我们对doris的倒排索引做了简单的介绍,本文的话,我们来演示一下doris中如何使用倒排索引。在doris中使用倒排索引主要分为两个阶段,第一个阶段是创... Raedoris系列2023-09-051765 阅读0 评论
热文Doris基础学习系列(四十二)Doris的倒排索引介绍 提到倒排索引,我们一般第一印象主要是lucene或者是solr或者是Elasticsearch。在Doris中,从2.0版本开始也提供有倒排索引,所以如果我们对数据模糊查询的场景要求不太高的话,我们也可以使用Dori... Raedoris系列2023-09-051479 阅读0 评论
热文Doris基础学习系列(四十一)使用Doris manager对接管的doris集群进行升级 doris在昨天(2023年9月4日)发布了新的版本v2.0.1,正好我们刚使用doris manager演练了一下doris的版本安装,在前面的文章我们按照的是2.0.0版本,所以这里的话,我们来演示下使用dori... Raedoris系列2023-09-051507 阅读0 评论
热文Doris基础学习系列(四十)Doris manager dashboard介绍 在前面的嗯文章我们已经把doris-manager给安装完毕了,然后我们也演示了安装和接管doris集群。本文的话我们介绍下doris-manager dashboard上的一些功能。1)查看doris集群信息这里我... Raedoris系列2023-09-041487 阅读0 评论