全部面试刷题微服务数据库消息队列搜索引擎大数据运维 go语言机器学习

想问下为什么paimon不需要SinkMaterializer算子呢？

提问者：帅平问题分类：大数据

Paimon

发布于：3个月前 (06-17) IP属地：四川省

3 个回答

满天都是派星べ

我们希望通过sequence field等手段来解决，这个算子性能比较难受

发布于：3个月前 (06-17) IP属地：四川省

我是蓝天i

嗯确实如果数据里有sequence field是更好的解决顺序问题的方式，现在主要是我们在把paimon 0.5版本的flink作业升级到0.8，看来这类在0.5里面依赖sinkmaterializer算子的作业很难平滑迁移了

发布于：3个月前 (06-17) IP属地：四川省

缝完心脏、一个人活

嗯确实如果数据里有sequence field是更好的解决顺序问题的方式，现在主要是我们在把paimon 0.5版本的flink作业升级到0.8，看来这类在0.5里面依赖sinkmaterializer算子的作业很难平滑迁移了

可以考虑加个开关放弃检查

发布于：3个月前 (06-17) IP属地：四川省

我来回答