paimon中 lookup join有优化手段吗? 0.8版本 lookup join有优化手段吗?有一张2000w左右的维度表,使用相同的主键和bucket数量,和hbase吞吐量相差一个量级了... 帅平大数据2024-06-04849 阅读3 评论
请问mysql整库同步到paimon过程中报错长度超了,在哪里的参数可以设置吗? 请问mysql整库同步到paimon过程中报错长度超了,在哪里的参数可以设置吗?... 帅平大数据2024-06-04673 阅读1 评论
我想请问下 如果两个流有共同字段 也有不同字段要更新 怎么定义sequence group呢? 我想请问下 如果两个流有共同字段 也有不同字段要更新 怎么定义sequence group呢?... 帅平大数据2024-06-04548 阅读1 评论
多任务并发写入一个表,依照官网开启了write-only后,挂上Compaction job。发现这个表的历史快照会一直保留,没有进行过期删除 请教大佬们一个问题,多任务并发写入一个表,依照官网开启了write-only后,挂上Compaction job。发现这个表的历史快照会一直保留,没有进行过期删除。是否是因为配置问题?... 帅平大数据2024-06-04637 阅读3 评论
最近在调研paimon,在使用过程中遇到 Use the tag incremental query, file does not exist的问题 请教一个问题。最近在调研paimon,在使用过程中遇到 Use the tag incremental query, file does not exist的问题,发现之前有同样的issues(https://git... 帅平大数据2024-05-10861 阅读2 评论
paimon为啥针对 20230501 to 20230502分区,分别还有1个 DELETE 操作? 请教个官方文档问题,地址: https://paimon.apache.org/docs/0.7/learn-paimon/understand-files/ 不理解为啥针对 20230501 to 20230502... 帅平大数据2024-05-10725 阅读1 评论
请问如果source(kafka)的字段改了名,paimon里头老字段数据不会更新到新字段,这是正常的吗 请问如果source(kafka)的字段改了名,paimon里头老字段数据不会更新到新字段,这是正常的吗... 帅平大数据2024-04-17699 阅读7 评论
对某张表进行Rescale Bucket INSERT OVERWRITE的时候,读取这张表的任务会受到影响吗? 对某张表进行Rescale Bucket INSERT OVERWRITE的时候,读取这张表的任务会受到影响吗?需要将读取这张表的任务停下吗?... 帅平大数据2024-04-15682 阅读1 评论
请问这种bucket下的data-xxx.orc文件丢失的问题有办法修复么? 请问这种bucket下的data-xxx.orc文件丢失的问题有办法修复么,写程序异常退出就出现这种问题了,表也查询不了... 帅平大数据2024-04-09677 阅读2 评论
热文flink 1.18,paimon 0.8-SNAPSHOT版本,lookup join经常出现oom的情况,之前用0.7版本没有这个问题,请问如何优化? flink 1.18,paimon 0.8-SNAPSHOT版本,lookup join经常出现oom的情况,之前用0.7版本没有这个问题,请问如何优化?报错信息如下: 2024-04-08 02:53:39 jav... 帅平大数据2024-04-081253 阅读3 评论
paimon-hive-connector-2.1-cdh-6.3-0.5.0-incubating.jar 升级到 paimon-hive-connector-2.1-cdh-6.3-0.7.0-i paimon-hive-connector-2.1-cdh-6.3-0.5.0-incubating.jar 升级到 paimon-hive-connector-2.1-cdh-6.3-0.7.0-incubatin... 帅平大数据2024-04-04686 阅读1 评论
请教下Append Queue Table 改 Append Scalable Table,bucket-key配置怎么去掉呢 请教下Append Queue Table 改 Append Scalable Table,bucket-key配置怎么去掉呢... 帅平大数据2024-04-02680 阅读1 评论
热文 两个任务同时写paimon主键表报错:Trying to delete file data-xxxxxx.orc which is not previously added 请教下 , 两个任务同时写paimon主键表,然后 java.lang.IllegalStateException: Trying to delete file data-xxxxxx.orc which is no... Rae大数据2024-03-291293 阅读1 评论
你好,请问下paimon支持实时查询吗?用flink sql流式实时查询明细进行聚合? 你好,请问下paimon支持实时查询吗?用flink sql流式实时查询明细进行聚合?... 帅平大数据2024-03-02957 阅读1 评论