大数据

数据可视化Datart系列（八）Datart使用之扩展数据源

在前面《数据可视化Datart系列（三）Datart使用之添加数据源》添加数据源中虽然我们看到datart默认支持很多的数据源，但是可能还是有部分数据源没有支持，所以如果要的话，则需要自行添加，具体的步骤如下：1. ...

帅平大数据2024-12-12736 阅读0 评论

数据可视化Datart系列（七）Datart使用之创建故事板

像我们日常写ppt的话，我们经常每一页ppt展示一部分内容，然后多页ppt使用动画的形式进行翻转，这样子给用户展示的时候，当前的ppt就比较高大上了。在Datart中有故事板的模块可以达到这样的效果，如果我们想要给老...

帅平大数据2024-12-12583 阅读0 评论

数据可视化Datart系列（六）Datart使用之同步表结构

有些学习在操作过程中遇到这样的问题，就是某张表已经在mysql中修改了表结构，比如给某张表新增了字段或者删除了字段，但是在创建数据视图的时候，发现这里的字段没变怎么办？比如mysql的表现在已经修改成了如下：也就是在...

帅平大数据2024-12-12638 阅读0 评论

数据可视化Datart系列（五）Datart使用之创建数可视化仪表盘

接下来就可以使用前面《数据可视化Datart系列（四）Datart使用之创建数据视图》创建的数据视图来进行创建任意的数据可视化仪表盘了，直接演示。一、进入仪表盘进入到datart的dashboard，点击第一个仪表盘...

帅平大数据2024-12-12793 阅读0 评论

数据可视化Datart系列（四）Datart使用之创建数据视图

上文《数据可视化Datart系列（三）Datart使用之添加数据源》实现了添加外部数据源，接下来就需要创建数据视图了。这里创建数据视图的主要作用就是从数据源提取我们想要的某些表，及某些表里面的部分字段，方便后面我们做...

帅平大数据2024-12-12628 阅读0 评论

数据可视化Datart系列（三）Datart使用之添加数据源

前面《数据可视化Datart系列（二）Datart部署安装》已经把datart给部署成功了，这里我们正式进入到使用环节，在dashboard左侧其实有很多功能，如下图：对于我们的日常需求的核心一般也就涉及到三大功能，...

帅平大数据2024-12-12713 阅读0 评论

数据可视化Datart系列（二）Datart部署安装

对于datart部署安装的话，目前咱们主要是使用docker的方式进行部署，需要的依赖主要是外部mysql做数据的持久化。这里我们一份完整的部署文档给大家。一、准备mysql默认的启动的datart是保存在h2中，但...

帅平大数据2024-12-12662 阅读0 评论

数据可视化Datart系列（一）Datart介绍

在进行大数据开发的时候，特别是涉及到数据仓库建设里面，我们经常需要涉及到统计每一层，每一张表每日的数据变化情况，用来评判我们数据仓库的数据是否正常，以便及时的发现问题，比如：哪张表哪一天没有数据的新增，这如果程序正常...

帅平大数据2024-12-12667 阅读0 评论

实时流存储fluss学习系列（十三）Fluss数据湖集成paimon

由于目前的工作暂时用不到paimon，也没有多余的服务器，同时使用paimon这块非常的简单，因此暂时不详解了，大家看看官方或者下面的介绍就会直接使用。Apahce Paimon创新性地结合了 Lake 格式和 LS...

帅平大数据2024-12-03965 阅读0 评论

实时流存储fluss学习系列（十二）Fluss数据湖介绍

Lakehouse 代表了一种新的开放式架构，它结合了数据湖和数据仓库的最佳元素。它将数据湖的可扩展性和成本效益与数据仓库的可靠性和性能相结合。Apache Iceberg、Apache Paimon、Apache ...

帅平大数据2024-12-03766 阅读0 评论

实时流存储fluss学习系列（十一）Fluss支持的数据类型

Fluss支持的数据类型有很多，对于flink 开发相关的同学来说几乎都是通用的。这里直接粘贴下官网的说明：DataTypeDescriptionBOOLEAN具有（可能）三值逻辑（TRUE、FALSE、UNKNOW...

帅平大数据2024-12-03577 阅读0 评论

实时流存储fluss学习系列（十）Fluss的数据过期TTL

在大数据处理的场景里面，涉及到开发的同学大概都能知道数据会长期积累，越来越多。在必要的时候我们会涉及到删除一些数据。在fluss中我们可以给表设置一个ttl，这时候只要表里面的数据过了ttl时间，那么他就会自动给删除...

帅平大数据2024-12-03550 阅读0 评论

实时流存储fluss学习系列（九）Fluss的分区介绍

在fluss中也有分区的概念，在前面的《实时流存储fluss学习系列（七）Fluss主键表介绍及使用教程》中我们演示创建表的时候演示了带有分区的创建表。目前的fluss官方提供的版本主要是0.5，所以本文仅对0.5版...

帅平大数据2024-12-03846 阅读0 评论

实时流存储fluss学习系列（八）Fluss的桶介绍

前面创建fluss的日志表和主键表的时候，我们演示过fluss桶的使用。在fluss中，桶是表数据存储的最小单元。创建 Fluss 表时，可以通过设置'bucket.num' = ''表的属性来指定 buc...

帅平大数据2024-12-03774 阅读0 评论

实时流存储fluss学习系列（七）Fluss主键表介绍及使用教程

上文《实时流存储fluss学习系列（六）Fluss日志表介绍及使用教程》已经介绍了fluss中日志表的使用，这里再介绍另外一种主键表。主键表的顾名思义就是当前创建的表有主键，和mysql的使用是相似的。同时主键表与日...

帅平大数据2024-12-03678 阅读0 评论