当Spark涉及到数据库的操作时,如何减少Spark运行中的数据库连接数? 当Spark涉及到数据库的操作时,如何减少Spark运行中的数据库连接数?... 帅平面试刷题2023-02-27782 阅读1 评论
热文简述下Spark中的缓存(cache和persist)与checkpoint机制,并指出两者的区别和联系 简述下Spark中的缓存(cache和persist)与checkpoint机制,并指出两者的区别和联系... 帅平面试刷题2023-02-271036 阅读1 评论
Repartition和Coalesce 的关系与区别,能简单说说吗? Repartition和Coalesce 的关系与区别,能简单说说吗?... 帅平面试刷题2023-02-27820 阅读1 评论
列举Spark常用的transformation和action算子,有哪些算子会导致Shuffle? 列举Spark常用的transformation和action算子,有哪些算子会导致Shuffle?... 帅平面试刷题2023-02-27936 阅读2 评论
热文简述Spark的宽窄依赖,以及Spark如何划分stage,每个stage又根据什么决定task个数? 简述Spark的宽窄依赖,以及Spark如何划分stage,每个stage又根据什么决定task个数?... 帅平面试刷题2023-02-271758 阅读3 评论