热文Dinky 实时计算平台系列（五）Dinky使用指南之认证中心-用户管理

在前面的文章我们已经介绍了Dinky平台的基本搭建，从本文开始，我们挨个来介绍下这个平台的使用指南，本文主要介绍的是认证中心的用户管理。首先来一个图：在前面我们介绍过，这个平台是一个集开发、测试、运维为一体的研发平台...

Raeflink系列2023-07-211462 阅读0 评论

热文Dinky 实时计算平台系列（四）Dinky安装包方式部署

前情提示：由于本文写的时间比较久了，新版本的dinky目录结构和这篇文章有一些差异，所以这里编写一个前情提示来标注下，了解这个差异按照下面的文档进行部署安装也是没问题的。主要的差异点有：1、旧版本的所有配置在appl...

Raeflink系列2023-07-202331 阅读0 评论

热文Dinky 实时计算平台系列（三）Dinky体验之docker方式安装（自有mysql）

上一篇文章《Dinky 实时计算平台系列（二）Dinky快速体验之docker方式安装（非自有mysql）》我们介绍了使用docker的方式快速的启动一个Dinky，但是里面我们是没有使用到本地数据库的，一般在企业的...

Raeflink系列2023-07-201594 阅读0 评论

热文Dinky 实时计算平台系列（二）Dinky快速体验之docker方式安装（非自有mysql）

对于新人来说，我们快速的体验这个Dinky的话比较简单，Dinky提供有docker相关的镜像，我们直接可以使用这个镜像来启动Dinky就可以直接进行体验了，下面我们直接来。1）首先在服务器上安装dockeryum ...

Raeflink系列2023-07-201186 阅读0 评论

热文Dinky 实时计算平台系列（一）Dinky介绍

最近在写paimon相关的文档，由于paimon与flink关联性比较强，因此这里在中间做一个小插曲，也就是介绍下这个Dlink。相信正在做大数据开发相关的同学，都比较清楚这个Dlink神器，这是一个在日常工作中使用...

Raeflink系列2023-07-202749 阅读0 评论

热文分布式调度系统Apache DolphinScheduler系列（十二）datax增量同步数据的实用方式

在前面的文章《分布式调度系统Apache DolphinScheduler系列（四）配置datax的增量同步》我们已经介绍过了datax中使用增量同步，但是这里的增量同步会涉及到一些数据问题，因为他只能通过全局设置的...

RaeDolphin系列2023-07-041921 阅读0 评论

热文Impala常用函数介绍

在这里我们介绍下cdh的Impala相关的sql函数，具体如下：1）获取当前时间timestamp 样式2021-12-10 04:36:48.147046000bigint 样式 1639110956函数/方法输出...

RaeHive系列2023-06-121174 阅读0 评论

热文hive内置函数（七）日期函数

这篇文章我们介绍下hive中的一些日期函数。1、datediff函数这个函数是返回结束日期减去开始日期的天数，示例如下：datediff(string enddate, string startdate) selec...

RaeHive系列2023-06-121605 阅读0 评论

热文hive内置函数（六）正则表达式

在hive的查询里面我们还会涉及到正则表达式的查询匹配，这里主要使用的函数是：regexp_extract函数。这个regexp_extract函数的使用方法是：regexp_extract(str,regexp,i...

RaeHive系列2023-06-121669 阅读0 评论

热文hive内置函数（五）4个by

在hive中我们还有4个by函数，分别是：order by sort by distribute by cluster by下面我们分别介绍下这4个函数1、order by全局排序，只有一个Reducer。2、sor...

RaeHive系列2023-06-121125 阅读0 评论

热文hive内置函数（四）窗口函数

这篇文字我们介绍下hive中的窗口函数，在hive中窗口函数主要涉及到3个要素，分别是：1、over函数定分析函数工作的数据窗口大小，这个数据窗口大小可能会随着行的变化而变化。2、current row（当前行）这里...

RaeHive系列2023-06-121097 阅读0 评论

热文hive内置函数（三）列转行函数

上一篇文章《hive内置函数（二）行转列函数》我们介绍了hive中行转列相关的内置函数，这篇文字我们相反操作，介绍下列转行相关的内置函数。在hive中列转行对应的内置函数主要有3个，分别是：Split(str, se...

RaeHive系列2023-06-121077 阅读0 评论

热文hive内置函数（二）行转列函数

在hive里面，其实我们主要是做一些sql相关的操作，因此对于普通的crud操作之外，还会涉及到其他的函数，这篇文章我们介绍下hive内置函数之行转列的函数。hive中行转列函数主要有4个，分别是：CONCAT(st...

RaeHive系列2023-06-121219 阅读0 评论

热文hive内置函数（一）NVL

在hive里面，其实我们主要是做一些sql相关的操作，因此对于普通的crud操作之外，还会涉及到其他的函数，这篇文章我们介绍下hive内置函数之nvl函数。nvl函数的意思是给值为null的查询结果数据赋值，他的格式...

RaeHive系列2023-06-121272 阅读0 评论

热文hive常用命令（三）sql相关命令

这篇文章我们主要是介绍hive常用的一些sql的命令，具体如下：说明语句查看hive中的所有数据库show databases用default数据库use default查询表结构desc table_name查看数...

RaeHive系列2023-06-121194 阅读0 评论