Paimon如何支持高效的流式写入？

流式数据优先写入内存中的 MemTable（跳表或有序数据结构），避免直接操作磁盘文件。
当 MemTable 达到阈值（如 128MB）或 Flink Checkpoint 触发时，异步刷盘生成 Level 0 的 SSTable 文件（ORC/Parquet 格式），减少随机 I/O。
SSTable 文件按主键（如 order_id）有序存储，写入时只需追加，避免传统 B+ 树的随机写入开销。
后台异步合并 Level 0 的小文件为高层级大文件（Compaction），减少读放大，同时不影响写入吞吐。

Compaction 操作由独立线程执行，与写入线程隔离，确保流式写入不受合并操作影响。
根据写入压力动态调整 Compaction 频率（如写入高峰时减少合并频率）。

根据主键哈希值将数据分配到多个 Bucket（如 4 个分桶），目录结构为 bucket-0 到 bucket-3。
每个 Bucket 独立处理写入，Flink 任务的不同并发子任务可并行写入不同 Bucket，避免锁竞争。

对Flink 的原生支持
支持自动创建动态分区