1 个回答
关于Spark中的广播变量和累加器的基本原理和用途
累加器（accumulator）是Spark中提供的一种分布式的变量机制，其原理类似于mapreduce，即分布式的改变，然后聚合这些改变。累加器的一个常见用途是在调试时对作业执行过程中的事件进行计数。
广播变量是在每个机器上缓存一份，不可变，只读的，相同的变量，该节点每个任务都能访问，起到节省资源和优化的作用。它通常用来高效分发较大的对象。发布于：2年前 (2023-02-27) IP属地：四川省
我来回答
您需要 登录 后回答此问题！