搜索 - 腾讯云开发者社区-腾讯云

文章/答案/技术大牛

发布

来自专栏大数据技术架构
数据湖｜Flink + Iceberg 全场景实时数仓的建设实践
在对 snapshot-4 进行写的时候，其实是完全不影响对 snapshot-2 和 snapshot-3 的读。Iceberg 的这个能力对于构建实时数仓是非常重要的能力之一。 Snapshot-4 写完成之后，会发生一次 commit 操作，这个时候 snapshot-4 变成了实心，此时就可以读了。
5.3K43发布于 2021-08-25
来自专栏最新最全的大数据技术体系
流数据湖平台Apache Paimon（三）Flink进阶使用
paimon-flink-action-0.5-SNAPSHOT.jar \ compact \ –path file:///tmp/paimon/default.db/T 所有当前表文件将被压缩，并创建一个新快照，即 snapshot : 38, “deltaRecordCount” : 20, “changelogRecordCount” : 0, “watermark” : -9223372036854775808 } 截至 snapshot snapshot-1 到 snapshot-4 被删除。为简单起见，我们将只关注以前快照中的文件，快照过期后的最终布局如下所示：结果，分区20230503至20230510被物理删除。
5.5K41编辑于 2023-07-31