数据可视化Datart系列(四)Datart使用之创建数据视图 上文《数据可视化Datart系列(三)Datart使用之添加数据源》实现了添加外部数据源,接下来就需要创建数据视图了。这里创建数据视图的主要作用就是从数据源提取我们想要的某些表,及某些表里面的部分字段,方便后面我们做... 帅平大数据2024-12-12616 阅读0 评论
数据可视化Datart系列(三)Datart使用之添加数据源 前面《数据可视化Datart系列(二)Datart部署安装》已经把datart给部署成功了,这里我们正式进入到使用环节,在dashboard左侧其实有很多功能,如下图:对于我们的日常需求的核心一般也就涉及到三大功能,... 帅平大数据2024-12-12696 阅读0 评论
数据可视化Datart系列(二)Datart部署安装 对于datart部署安装的话,目前咱们主要是使用docker的方式进行部署,需要的依赖主要是外部mysql做数据的持久化。这里我们一份完整的部署文档给大家。一、准备mysql默认的启动的datart是保存在h2中,但... 帅平大数据2024-12-12644 阅读0 评论
数据可视化Datart系列(一)Datart介绍 在进行大数据开发的时候,特别是涉及到数据仓库建设里面,我们经常需要涉及到统计每一层,每一张表每日的数据变化情况,用来评判我们数据仓库的数据是否正常,以便及时的发现问题,比如:哪张表哪一天没有数据的新增,这如果程序正常... 帅平大数据2024-12-12657 阅读0 评论
Doris基础学习系列(五十一)Doris Light Schema Change毫秒级变更数据表结构 在我们使用做数据仓库的时候,不管是dwd、dws,ads,dim层等,随着业务需求的增加,我们经常会涉及到在某张表里面添加一些列维度,既然是数仓,那么每张表的数据肯定是非常大的一个量级了,此时大家的做法是什么呢?常用... 帅平doris系列2024-12-11664 阅读0 评论
Doris基础学习系列(五十)doris的部分列更新 在使用doris做数据仓库的时候,不管是在dwd层或者dws层或者其他层,我们经常会涉及到更新某张表的数据,对应的应用场景有:1、更新现有表的部分列的值 2、拼接大表,在现有表的基础上拼接上缺失的部分列数据,但是当前... 帅平doris系列2024-12-11858 阅读0 评论
热文人工智能AI本地大模型系列(九)Dify的工作流使用教程 本文我们继续讲解Dify的工作流。这里Dify的工作流其实就是把一整件事拆分成很多项,拆分之后每一项都是一个单独的任务,最后把这些任务给串联起来进行执行以达到最后的期望结果。这里我们举个例子,比如我要ai帮我生成一套... Rae人工智能2024-12-052097 阅读0 评论
人工智能AI本地大模型系列(八)Dify的AI场景化模板 在日常我们与人交流的过程中,加入我们想咨询一个病情,那么我们咨询的对象就是医生,如果我们咨询的教材信息,那么我们咨询的对象就是教师。所以在AI里面,我们可以通过一个提示词来创建一个场景,即:假设对方是医生,这里有一个... Rae人工智能2024-12-05608 阅读0 评论
人工智能AI本地大模型系列(七)Dify知识库之使用网站内容作为语料库 上文《人工智能AI本地大模型系列(六)Dify知识库之使用nation语料库》我们介绍了使用nation自定义语料库,这里的话我们再介绍下使用第三方站点来作为语料库的输入使用大模型。下面直接开始。一、FireCraw... Rae人工智能2024-12-05651 阅读0 评论
人工智能AI本地大模型系列(六)Dify知识库之使用nation语料库 前面《人工智能AI本地大模型系列(五)Dify知识库之使用已有的语料》我们介绍了在dify中使用本地上传语料库的案例,这里我们再介绍下使用nation的语料库。对于在dify中使用nation的语料库来说,我们可以理... Rae人工智能2024-12-05643 阅读0 评论
Go语言开发基础系列(四十八)redis开发使用教程 在go语言开发中,与redis进行交互的场景也非常多,所以这里我们也介绍下go语言开发中redis的使用。这里使用的redis框架主要是:gopkg.in/redis.v4。所以在使用之前记得安装下依赖。下面介绍下详... 帅平go2024-12-04651 阅读0 评论
实时流存储fluss学习系列(十三)Fluss数据湖集成paimon 由于目前的工作暂时用不到paimon,也没有多余的服务器,同时使用paimon这块非常的简单,因此暂时不详解了,大家看看官方或者下面的介绍就会直接使用。Apahce Paimon创新性地结合了 Lake 格式和 LS... 帅平大数据2024-12-03944 阅读0 评论
实时流存储fluss学习系列(十二)Fluss数据湖介绍 Lakehouse 代表了一种新的开放式架构,它结合了数据湖和数据仓库的最佳元素。它将数据湖的可扩展性和成本效益与数据仓库的可靠性和性能相结合。Apache Iceberg、Apache Paimon、Apache ... 帅平大数据2024-12-03752 阅读0 评论
实时流存储fluss学习系列(十一)Fluss支持的数据类型 Fluss支持的数据类型有很多,对于flink 开发相关的同学来说几乎都是通用的。这里直接粘贴下官网的说明:DataTypeDescriptionBOOLEAN具有(可能)三值逻辑(TRUE、FALSE、UNKNOW... 帅平大数据2024-12-03572 阅读0 评论
实时流存储fluss学习系列(十)Fluss的数据过期TTL 在大数据处理的场景里面,涉及到开发的同学大概都能知道数据会长期积累,越来越多。在必要的时候我们会涉及到删除一些数据。在fluss中我们可以给表设置一个ttl,这时候只要表里面的数据过了ttl时间,那么他就会自动给删除... 帅平大数据2024-12-03540 阅读0 评论