帅平V管理员
文章 5088 篇 | 评论 2307 次
作者 帅平 发布的文章
热文运行java项目的时候报错:NoClassDefFoundError: com/fasterxml/jackson/core/util/JacksonFeature
在运行使用maven项目编写的java项目的时候,出现类找不到: Caused by: java.lang.NoClassDefFoundError: com/fasterxml/jackson/core/util/...
线上环境的Delta Lake数据湖小文件太多了怎么办?
线上环境的Delta Lake数据湖使用了快1年了,经过了各种增量更新,有很多小文件,影响了查询效率,请问可以压缩吗? 怎么弄?...
Delta Lake如何移出不想要的旧版本数据?
在Delta Lake中所有的数据都被物化成了数据文件,因此有很多旧版本的数据,有时候我们想要删除一些旧版本的数据怎么办?...
Delta Lake希望数据的保留时间小于168小时怎么办?
Delta Lake中数据的保留时间默认是7天,也就是:168小时,如果由于磁盘空间有限,希望数据的保留时间小于168小时怎么办?...
spark结构化流处理中,如何处理数据的去重?
在spark结构化流处理过程中,由于各种原因,我们可能会向消息队列里面发送重复的数据,此时我们不希望spark结构化流计算的时候重复计算这些数据,因为再把这些数据纳入计算的话,则会出现结果不准确的情况。因此如何去重呢...
在spark结构化流处理过程中会出现有状态流和无状态流,这两个流有什么区别?
在spark结构化流处理过程中会出现有状态流和无状态流,这两个流有什么区别?...
想要使用命令的方式在kafka中创建一个生产者测试生产发送数据应该怎么办?
想要使用命令的方式在kafka中创建一个生产者测试生产发送数据应该怎么办?...
