两个任务同时写paimon主键表报错:Trying to delete file data-xxxxxx.orc which is not previously added
请教下 , 两个任务同时写paimon主键表,然后 java.lang.IllegalStateException: Trying to delete fi...
请教下 , 两个任务同时写paimon主键表,然后 java.lang.IllegalStateException: Trying to delete fi...
在本站我们我们介绍过prometheus+grafana相关的教程。本文记录下使用docker-compose搭建prometheus+grafana+no...
上文《数仓架构构建实战思路(二十)数据仓库运行过程中可能存在问题》我们提到了数据仓库运行的过程中会涉及到各种问题。但是里面比较隐含的问题主要是上游的数据发生...
数据仓库建设好了之后,在运行的过程中除了基础的技术部分,其实还是会存在很多的不可控因素,我们在问答社区里面进行了相关常见问题的整理,详情可参考:《数据仓库常...
前面我们已经可以完成正常的一个数仓的基本使用了。前面我们也提到,既然花了大成本建设数仓,那么我们肯定是不仅限于数仓对于业务的基本使用了,所以接下来需要筹划的...
根据前面的数据仓库我们已经开始进入开发阶段,那么接下来的话,需要筹划的就是数据治理。也就是大家经常涉及到的数据血缘关系的建设。在整个数据仓库里面,我们会涉及...
上文《数仓架构构建实战思路(十六)表设计原则很重要》我们根据表设计思路,完成各个层,各个模块的表设计,接下来就是开发了。所以这里其实主要是相对团队来说布置任...
前面我们已经完成了:业务熟悉分层策划模型选择指标拆分那么接下来我们就开始表设计了,这里的表设计的话我们一般会首先设计DIM层,因为DIM层是维度...
做数据仓库的时候,我们不仅仅只是为了做数据存储和方便为前端提供快捷的查询。很多同学对于数据仓库的理解就是:建立数据仓库的目的就是配合前端产品业务的需求,对外...
完成了前面的工作之后,我们就要开始进行模型的抽象设计了。在建模的时候,我们需要对整体的业务数据进行抽象,根据如下的领域进行分类抽象整理:1、业务主线2、...