Spark有几种部署方式,请分别简要论述?

提问者:帅平 问题分类:面试刷题

Spark有几种部署方式,请分别简要论述?

1 个回答
你我这辈子最的依靠
你我这辈子最的依靠

Spark有三种常见的部署方式,分别是本地模式、单例模式和Yarn模式。

1) Local:运行在一台机器上,通常是练手或者测试环境。
2)Standalone:构建一个基于Mster+Slaves的资源调度集群,Spark任务提交给Master运行。是Spark自身的一个调度系统。
3)Yarn: Spark客户端直接连接Yarn,不需要额外构建Spark集群。有yarn-client和yarn-cluster两种模式,主要区别在于:Driver程序的运行节点。

发布于:3周前 (02-27)
我来回答