spark项目实战

这是关于 spark项目实战 分类的相关文章列表

Spark案例介绍(三)二次排序

在使用spark的场景里面,二次排序是我们经常会使用到的应用场景,那么什么是二次排序呢?二次排序就是类似把key-value pair的rdd首先根据key进行排序,再根据value进行排序。这个案例我们介绍根据sp...

Spark案例介绍(二)合并小文件

在spark的场景里面我们有时候会遇到很多场景,例如不同的客户端收集的日志都保存到对应client目录里面,此时如果我们分析的时候,日志文件都分布在不同的目录里面,而且可能由于写文件的规则产生很多个小文件,那有没有办...

    最新公告

    架构师学习大本营

    分享分布式与微服务架构、分布式数据库、分布式事务、云原生、大数据与云计算。我们也欢迎大家分享经验

    如果你需要面试复习的话,可以进入 面试刷题 模块进行刷题

    如果有问题需要他人协助解决,可以进入 问答社区 板块提问或者回答

百度热搜

似水流年

今日已经过去小时
这周已经过去
本月已经过去
今年已经过去个月

随便看看