Spark有几种部署方式,请分别简要论述?

提问者:帅平 问题分类:面试刷题
Spark有几种部署方式,请分别简要论述?
1 个回答
你我这辈子最的依靠
你我这辈子最的依靠
Spark有三种常见的部署方式,分别是本地模式、单例模式和Yarn模式。
1) Local:运行在一台机器上,通常是练手或者测试环境。
2)Standalone:构建一个基于Mster+Slaves的资源调度集群,Spark任务提交给Master运行。是Spark自身的一个调度系统。
3)Yarn: Spark客户端直接连接Yarn,不需要额外构建Spark集群。有yarn-client和yarn-cluster两种模式,主要区别在于:Driver程序的运行节点。
发布于:2年前 (2023-02-27) IP属地:四川省
我来回答