热文Hive安装配置篇(一)Hive3.1.3单机版安装教程
最近为了做DolphinScheduler的演示,因此需要一套大数据的环境,因此记录下这些大数据组件的安装。首先我们需要安装一个Hive的环境,这里我们使用的Hive版本是apache-hive-3.1.3,因此在1...
最近为了做DolphinScheduler的演示,因此需要一套大数据的环境,因此记录下这些大数据组件的安装。首先我们需要安装一个Hive的环境,这里我们使用的Hive版本是apache-hive-3.1.3,因此在1...
最近为了做DolphinScheduler的演示,因此需要一套大数据的环境,因此记录下这些大数据组件的安装。首先我们需要安装一个hbase的环境,这里我们使用的hbase版本是hbase-2.5.3-hadoop3,...
最近为了做DolphinScheduler的演示,因此需要一套大数据的环境,因此记录下这些大数据组件的安装。首先我们需要安装一个hadoop的环境,这里我们使用的hadoop版本是3.3.5,因此在192.168.3...
上一篇文章《分布式调度系统Apache DolphinScheduler系列(三)配置datax的全量同步》我们配置了datax的全量同步,这里的话我们还可以配置增量同步,增量同步也满足很多的一些场景,例如数据仓库环...
上一篇文章我们《Spring Cloud微服务项目模板系列(四)添加rocketmq公共消息队列模块》我们为微服务项目添加了消息中间件rocketmq,这篇文章我们介绍下为微服务模块添加文件上传。文件上传几乎都是每个...
上一篇文章《Spring Cloud微服务项目模板系列(三)添加Spring cloud gateway网关》我们在添加网关之后,其实一个基础的项目就已经完全成型了,这里的话,我们再极少一个添加rocketmq的公共...
上一篇文章《Spring Cloud微服务项目模板系列(二)添加sentinel限流降级服务》我们把sentinel给引入进来了,这篇文章我们给微服务添加网关-spring cloud gateway。加上此模块之后...
在spring cloud gateway中,过滤器一般分为两种,一种是单个路由的过滤器GatewayFilter(应用到单个路由或者一个分组的路由上),一种是全局的过滤器GlobalFilter(应用到所有的路由上...
这篇文章我们还是在之前的文章《Spring Cloud微服务项目模板系列(一)添加服务治理和远程调用》代码里面进行调整。这里我们主要使用常用的限流降级工具sentinel。所有的代码在文末就可以下载。这里我们主要调几...
在微服务中,我们常用的熔断组件有:Sentinel、Hystrix和resilience4j。那么这几个组件有什么区别呢?下面列举一下序号指标SentinelHystrixresilience4j1隔离策略信号量隔离...
这篇文章我们介绍下使用jmeter测试http接口的高并发案例。这里首先我们准备一个可以测试的接口,如下:http://127.0.0.1:8091/order/prod/1下面直接开始操作jemeter,使用步骤如...
这里的Spring Cloud微服务项目模板系列主要介绍的是利用spring cloud做微服务的时候,到底服务应该怎么创建,应该怎么区分,各子模块之间如何配置调用。本文我们介绍的第一章,主要介绍使用spring c...
上一篇文章《分布式调度系统Apache DolphinScheduler系列(二)DolphinScheduler伪集群安装》我们搭建了一个Apache DolphinScheduler伪集群,这里我们来实战一下,配...
上一篇文章《分布式调度系统Apache DolphinScheduler系列(一)DolphinScheduler介绍》我们做了一个初步的介绍。在Apache DolphinScheduler的官网里面,介绍了好几种...
在日常的工作中,我们经常会涉及到调度系统,特别是在数据做ETL的时候,或者需要定时做某些操作的时候,这时候调度系统的需求就非常强烈。因此这里我们介绍下我们这边使用的分布式调度系统:Apache DolphinSche...