搜索一下
注册/
登录
繁
当前位置:
首页
问答社区
大数据
park读取paimon的数据来跑批耗时太久,导致源数据的snapshot已经过期了,找不到对应的数据了
全部
面试刷题
微服务
数据库
消息队列
搜索引擎
大数据
运维
go语言
人工智能
park读取paimon的数据来跑批耗时太久,导致源数据的snapshot已经过期了,找不到对应的数据了
提问者:
帅平
问题分类:
大数据
你们有没有遇到过这样的问题,
spark
读取
paimon
的数据来跑批,但是
spark
的任务耗时都比较久7-8个小时,这样就会导致源数据的snapshot已经过期了,找不到对应的数据了,现在怎么办?
Paimon
数据湖
Spark
发布于:4小时前
IP属地:四川省
我来回答
举报
1 个回答
温柔刀下鬼
我也遇到过,要么调整快照保留策略 要么优化读取
发布于:4小时前
IP属地:四川省
有用
0
回复
举报
我来回答
您需要
登录
后回答此问题!