热文dinky 实时计算平台系列(二十三)Dinky0.x版本升级到1.0版本的踩坑之路
最近Dinky1.0版本发布了,在这里详细记录下对应的踩坑之路。本文档会进行长期持续的更新。1)jdk问题这里我服务器安装的jdk的版本,但是启动的时候报错了,提示:Unrecognized VM option ...
搜索 "dinky 实时计算平台系列" 关键词的相关文章分类列表
最近Dinky1.0版本发布了,在这里详细记录下对应的踩坑之路。本文档会进行长期持续的更新。1)jdk问题这里我服务器安装的jdk的版本,但是启动的时候报错了,提示:Unrecognized VM option ...
在日常的业务场景中,我们使用flink做cdc的工作的时候,大多数都有这样的需求,把mysql的数据近视的导入到doris中做分析。为了方便简写代码,这里我们使用Dinky来演示下把mysql的数据使用cdc同步到d...
dinky 实时计算平台系列(十九)FlinkSql作业开发之FlinkSql-Kafka》和《dinky 实时计算平台系列(二十)FlinkSql作业开发之FlinkSql-cdc》。本文的话,我们结合下mysql...
dinky 实时计算平台系列(十九)FlinkSql作业开发之FlinkSql-Kafka》我们介绍了flinksql中kafka的connector,在实际的业务中我们还会涉及到的有mysql的cdc,本文的话我们...
dinky 实时计算平台系列(十八)FlinkSql作业开发之快速演示》我们在dinky中进行了一个简单的演示开发,从现在开始,我们切合实际情况,做一些flink多数据源的connector方面的开发,本文主要演示的...
本文的话,我们使用官网的案例来演示下在Dinky平台上开发一个flinksql的作业。下面直接开始.1)首先创建一个作业这里我们创建一个名为test2的作业,此时就会在右侧打开一个新的黑框。如下图:2)在黑框里面编写...
在dinky的flinksql数据开发编辑器的右侧,还有一个比较重要的功能就是保存点,如下图:这个保存点不是用来配置的,它是一系列的记录。当我们在调试这个作业的时候,我们通过该cancel命令停止作业的时候,会自动生...
在flinksql的作业编辑器右侧除了作业配置之外,还有执行配置,如下图:这个执行配置里面只有4个选项吻别是预览结果,打印流,最大行数,自动停止。这个执行配置在我们调试作业的阶段,建议所有的选项都打开,方便查看调试的...
dinky 实时计算平台系列(十四)Dinky数据开发之FlinkSql作业执行模式》我们介绍了flinksql相关的作业模式。我们还是再来看下这个编辑器界面,如下图:在上图右侧的部分,我们圈起来的部分这里有很多的配...
在前面的文章我们介绍了dinky中的作业。也介绍了这里的黑框是用来编写实际代码的,编写完成之后,我们需要调试,需要验证,那么就需要对应的执行环境,不同的执行环境就对应不同的执行模式。本文的话,我们介绍下dinky中F...
dinky 实时计算平台系列(十二)Dinky数据开发之作业概述》我们介绍了dinky作业的相关概念,在最后我们看到有一个编辑器区域,如下图:这个区域里面就是专门用来编写代码的,这里编写代码其实和我们日常使用其他编辑...
在Flink中,有一个很重要的功能就是直接在页面上做数据开发,本文介绍下Dinky数据开发之作业概述。这里的作业指的是什么呢?在使用java进行flink编程的时候,我们经常会把一套相同业务的逻辑放到一个job里面进...
dinky 实时计算平台系列(十)Dinky使用指南之注册中心-Flink实例管理》我们介绍了Dinky添加单独的Flink集群,但是在实际工作中,很多公司会把flink的任务运行在Flink on yarn或者Fl...
从本文开始,我们将进入到Dinky的核心部分了,这里的核心部分是指的是如何使用Dinky来满足日常的业务工作研发/运维等工作。本文介绍的第一个是集群管理。我们知道Dinky主要是一个基于Flink实现的实时计算平台,...
在dinky中,由于目前的最新版本是0.7.3的版本,里面很多内容都没有完善,因此这里的角色数据权限管理做一下待定,因为整体功能目前还没闭环,待后面dinky版本升级之后再来补充下。......