DataHub开源数据治理实战(四)DataHub元数据摄入之可视化操作 这里我们开始介绍DataHub的主要功能之元数据摄入,这里的元数据摄入有两种方式,分别是:1、通过dashboard可视化的设置元数据摄入基础信息。2、通过yaml文件的形式创建元数据摄入基础信息。本文我们主要演... Rae /数据仓库系列 /2024-02-18 /0 评论 /171 阅读
DataHub开源数据治理实战(三)DataHub dashboard介绍 上文《DataHub开源数据治理实战(二)DataHub安装部署》我们使用quickstart的方式快速的部署了一个Datahub。最后我们可以看到可视化的dashboard。本文我们对dashboard进行一下简单... Rae /数据仓库系列 /2024-02-18 /0 评论 /185 阅读
DataHub开源数据治理实战(二)DataHub安装部署 本文我们介绍下DataHub的安装部署。对于DataHub来说,安装部署非常简单,直接使用docker即可,所以这里我们部署DataHub之前需要准备必要的环境:1、python32、docker3、dock... Rae /数据仓库系列 /2024-02-18 /0 评论 /223 阅读
DataHub开源数据治理实战(一)DataHub介绍 在之前我们介绍了atlas的血缘关系,详见《Apache Atlas血缘关系实战》。由于服务器配置比较低,无法演示,所以Atlas相关的系列没有写完,在实际的业务中,其实我们也没有使用atlas,主要的原因是:1、比... Rae /数据仓库系列 /2024-02-18 /0 评论 /212 阅读
代码质量管理系列(八)使用docker方式安装sonarqube 前面《代码质量管理系列(四)SonarQube安装》我们以正式的方式部署了SonarQube,这里我们再演示一个比较简单的方式,即使用docker的方式不熟sonarqube,下面直接开始:## 创建数据目... Rae /服务器运维 /2024-02-05 /0 评论 /232 阅读
代码质量管理系列(七)测试代码 前面的文章我们已经完成了所有的基础组件,下面我们就来开始测试整个job流程。1)gitlab创建项目首先我们在gitlab上创建一个项目,示例如下:然后我们使用git工具把项目拉取到本地:2)编写测试项目这里我们需要... Rae /服务器运维 /2024-02-05 /0 评论 /187 阅读
代码质量管理系列(六)安装sonarQube-scanner 上文《代码质量管理系列(四)SonarQube安装》我们已经安装好了SonarQube,接下来我们就要安装SonarQube-Scanner了。1)下载SonarQuebe-Scanner这里首先第一步肯定是下载So... Rae /服务器运维 /2024-02-05 /0 评论 /188 阅读
代码质量管理系列(五)SonarQube汉化 上文《代码质量管理系列(四)SonarQube安装》已经成功的实现了sonarQube的安装。示例图如下:可以看到这里整个项目都是英文的,对于我们来说,使用中文版的是不是会更好一点?所以本文我们来汉化一下整个sona... Rae /服务器运维 /2024-02-05 /0 评论 /252 阅读
代码质量管理系列(四)SonarQube安装 前面我们的准备工作已经完成2/5了,接下来我们继续安装SonarQube。直接开始1)下载SonarQube这里我们直接去SonarQube官网下载最新版本的SonarQube即可,这里我们下载社区版本的就够用了,示... Rae /服务器运维 /2024-02-05 /0 评论 /202 阅读
代码质量管理系列(三)GitLab Runner安装 上文《代码质量管理系列(二)GitLab安装》我们已经完成了GitLab的安装,这里接着我们来安装gutlab runner,这是一个CI/CD的执行工具。直接开始1)下载gitlab runner上文我们安装的gi... Rae /服务器运维 /2024-02-05 /0 评论 /198 阅读