热文DataHub开源数据治理实战(四)DataHub元数据摄入之可视化操作 这里我们开始介绍DataHub的主要功能之元数据摄入,这里的元数据摄入有两种方式,分别是:1、通过dashboard可视化的设置元数据摄入基础信息。 2、通过yaml文件的形式创建元数据摄入基础信息。本文我们主要演示... Rae数据仓库系列2024-02-181179 阅读0 评论
热文DataHub开源数据治理实战(三)DataHub dashboard介绍 上文《DataHub开源数据治理实战(二)DataHub安装部署》我们使用quickstart的方式快速的部署了一个Datahub。最后我们可以看到可视化的dashboard。本文我们对dashboard进行一下简单... Rae数据仓库系列2024-02-181276 阅读0 评论
热文DataHub开源数据治理实战(二)DataHub安装部署 本文我们介绍下DataHub的安装部署。对于DataHub来说,安装部署非常简单,直接使用docker即可,所以这里我们部署DataHub之前需要准备必要的环境:1、python3 2、docker 3、docker... Rae数据仓库系列2024-02-181911 阅读0 评论
热文DataHub开源数据治理实战(一)DataHub介绍 在之前我们介绍了atlas的血缘关系,详见《Apache Atlas血缘关系实战》。由于服务器配置比较低,无法演示,所以Atlas相关的系列没有写完,在实际的业务中,其实我们也没有使用atlas,主要的原因是:1、比... Rae数据仓库系列2024-02-181429 阅读0 评论
热文代码质量管理系列(八)使用docker方式安装sonarqube 前面《代码质量管理系列(四)SonarQube安装》我们以正式的方式部署了SonarQube,这里我们再演示一个比较简单的方式,即使用docker的方式不熟sonarqube,下面直接开始:## 创建数据目录 mkd... Rae服务器运维2024-02-051129 阅读0 评论
热文代码质量管理系列(七)测试代码 前面的文章我们已经完成了所有的基础组件,下面我们就来开始测试整个job流程。1)gitlab创建项目首先我们在gitlab上创建一个项目,示例如下:然后我们使用git工具把项目拉取到本地:2)编写测试项目这里我们需要... Rae服务器运维2024-02-051031 阅读0 评论
热文代码质量管理系列(六)安装sonarQube-scanner 上文《代码质量管理系列(四)SonarQube安装》我们已经安装好了SonarQube,接下来我们就要安装SonarQube-Scanner了。1)下载SonarQuebe-Scanner这里首先第一步肯定是下载So... Rae服务器运维2024-02-051007 阅读0 评论
热文代码质量管理系列(五)SonarQube汉化 上文《代码质量管理系列(四)SonarQube安装》已经成功的实现了sonarQube的安装。示例图如下:可以看到这里整个项目都是英文的,对于我们来说,使用中文版的是不是会更好一点?所以本文我们来汉化一下整个sona... Rae服务器运维2024-02-051695 阅读0 评论
热文代码质量管理系列(四)SonarQube安装 前面我们的准备工作已经完成2/5了,接下来我们继续安装SonarQube。直接开始1)下载SonarQube这里我们直接去SonarQube官网下载最新版本的SonarQube即可,这里我们下载社区版本的就够用了,示... Rae服务器运维2024-02-051182 阅读0 评论
热文代码质量管理系列(三)GitLab Runner安装 上文《代码质量管理系列(二)GitLab安装》我们已经完成了GitLab的安装,这里接着我们来安装gutlab runner,这是一个CI/CD的执行工具。直接开始1)下载gitlab runner上文我们安装的gi... Rae服务器运维2024-02-051214 阅读0 评论
代码质量管理系列(二)GitLab安装 这里我们演示一下安装gitlab,网上的教程也很多,这里主要是演示一下。1)准备服务器这里准备一台单独的服务器,一般来说,代码是一个团队的产出,是一个公司的资产。所以代码的存放是非常重要的,我们一般会为gitlab单... Rae服务器运维2024-02-05930 阅读0 评论
热文代码质量管理系列(一)代码质量管理介绍 在实际的工作中,作为技术团队的leader一般都会有管控团队开发人员代码质量的要求。但是对于团队来说,每个人的开发水平参差不齐,同时我们也不可能实现人工保姆式的去挨个查看他们的代码,所以对于此项任务来说,最好的方式就... Rae服务器运维2024-02-051000 阅读0 评论
热文服务端接口安全之使用AES加解密案例 上文《服务端接口安全之验签sign案例》我们介绍了sign验签的案例,在服务端接口安全里面,有时候我们部分传递的参数还得使用对称加密的方式进行传输,在客户端把具体的参数值进行加密,然后在服务端使用密钥把参数值解密出来... Raejava2024-02-041021 阅读0 评论
热文服务端接口安全之验签sign案例 上文《自动生成appid和appsecret的案例教程》我们介绍了自动生成appid和appsecret的案例。既然生成了,我们如何使用呢?在我们生产环境,经常会涉及到为第三方系统提供某个接口,但是为了接口安全,我们... Raejava2024-02-041192 阅读0 评论
热文Apache Druid系列(九)Druid删除数据 在druid中删除数据个人感觉是一个非常麻烦的事情,主要是他不能直接编写sql进行删除,只能使用task的方式进行删除。在druid中删除数据主要分为两个步骤,分别是:1、该段必须首先标记为“未使用”。当用户通过协调... Rae大数据2024-02-021367 阅读0 评论