Apache Iceberg 与 Delta Lake 表格式对比（Schema 演进、时间旅行与分区）

# Apache Iceberg 与 Delta Lake 表格式对比（Schema 演进、时间旅行与分区） ## 概述 现代数据湖表格式提供事务一致性与演进能力。Iceberg 与 Delta 在元数据组织与操作语义上各有优势。 ## 关键实践与参数 - Schema 演进：支持列增删与类型变更（受限）；需版本化与兼容检查。 - 分区演进：Iceberg 支持隐藏分区与演进；Delta 通过重写与优化实现。 - 时间旅行：按快照 ID 或时间点查询历史状态。 ## 示例（Iceberg SQL） ```sql SELECT * FROM table VERSION AS OF 12345; ALTER TABLE table ADD COLUMN extra STRING; ``` ## 验证方法 - 对比不同快照下查询结果；验证时间旅行的完整性。 - Schema 变更后的读取兼容与写入行为测试。 - 分区演进前后性能与存储成本对比。 ## 注意事项 - 表格式与引擎兼容性（Spark/Trino/Flink）需验证。 - 元数据与快照数量管理；避免膨胀与性能衰减。 - 事务与并发写入的冲突解决策略。