DataHub开源数据治理实战（三）DataHub dashboard介绍
上文《DataHub开源数据治理实战（二）DataHub安装部署》我们使用quickstart的方式快速的部署了一个Datahub。最后我们可以看到可视化的dashboard。本文我们对dashboard进行一下简单...
RaeV管理员
文章 1948 篇 | 评论 3725 次
作者 Rae 发布的文章
热文DataHub开源数据治理实战（二）DataHub安装部署
本文我们介绍下DataHub的安装部署。对于DataHub来说，安装部署非常简单，直接使用docker即可，所以这里我们部署DataHub之前需要准备必要的环境：1、python3 2、docker 3、docker...
在之前我们介绍了atlas的血缘关系，详见《Apache Atlas血缘关系实战》。由于服务器配置比较低，无法演示，所以Atlas相关的系列没有写完，在实际的业务中，其实我们也没有使用atlas，主要的原因是：1、比...
前面《代码质量管理系列（四）SonarQube安装》我们以正式的方式部署了SonarQube，这里我们再演示一个比较简单的方式，即使用docker的方式不熟sonarqube，下面直接开始：## 创建数据目录 mkd...
代码质量管理系列（七）测试代码
前面的文章我们已经完成了所有的基础组件，下面我们就来开始测试整个job流程。1）gitlab创建项目首先我们在gitlab上创建一个项目，示例如下：然后我们使用git工具把项目拉取到本地：2）编写测试项目这里我们需要...
代码质量管理系列（六）安装sonarQube-scanner
上文《代码质量管理系列（四）SonarQube安装》我们已经安装好了SonarQube，接下来我们就要安装SonarQube-Scanner了。1）下载SonarQuebe-Scanner这里首先第一步肯定是下载So...
热文代码质量管理系列（五）SonarQube汉化
上文《代码质量管理系列（四）SonarQube安装》已经成功的实现了sonarQube的安装。示例图如下：可以看到这里整个项目都是英文的，对于我们来说，使用中文版的是不是会更好一点？所以本文我们来汉化一下整个sona...
代码质量管理系列（四）SonarQube安装
前面我们的准备工作已经完成2/5了，接下来我们继续安装SonarQube。直接开始1）下载SonarQube这里我们直接去SonarQube官网下载最新版本的SonarQube即可，这里我们下载社区版本的就够用了，示...
代码质量管理系列（三）GitLab Runner安装
上文《代码质量管理系列（二）GitLab安装》我们已经完成了GitLab的安装，这里接着我们来安装gutlab runner，这是一个CI/CD的执行工具。直接开始1）下载gitlab runner上文我们安装的gi...
代码质量管理系列（二）GitLab安装
这里我们演示一下安装gitlab，网上的教程也很多，这里主要是演示一下。1）准备服务器这里准备一台单独的服务器，一般来说，代码是一个团队的产出，是一个公司的资产。所以代码的存放是非常重要的，我们一般会为gitlab单...
在实际的工作中，作为技术团队的leader一般都会有管控团队开发人员代码质量的要求。但是对于团队来说，每个人的开发水平参差不齐，同时我们也不可能实现人工保姆式的去挨个查看他们的代码，所以对于此项任务来说，最好的方式就...
上文《服务端接口安全之验签sign案例》我们介绍了sign验签的案例，在服务端接口安全里面，有时候我们部分传递的参数还得使用对称加密的方式进行传输，在客户端把具体的参数值进行加密，然后在服务端使用密钥把参数值解密出来...
上文《自动生成appid和appsecret的案例教程》我们介绍了自动生成appid和appsecret的案例。既然生成了，我们如何使用呢？在我们生产环境，经常会涉及到为第三方系统提供某个接口，但是为了接口安全，我们...
热文Apache Druid系列（九）Druid删除数据
在druid中删除数据个人感觉是一个非常麻烦的事情，主要是他不能直接编写sql进行删除，只能使用task的方式进行删除。在druid中删除数据主要分为两个步骤，分别是：1、该段必须首先标记为“未使用”。当用户通过协调...
Apache Druid系列（八）Druid更新数据说明
在druid中不支持更新数据的，如果要涉及到更新数据，则只能使用重新导入数据的方式进行覆盖。所以总体的思路如下：准备一份需要更新的完整数据，例如原始数据是：{"age":40,"birthday":"2019-08-...