apache / apache/iceberg-python
[Feat] Support Merge-on-Read mode for Deletes
未关闭
- 主要语言
- Python
- 星标
- 1.1k
- 派生
- 581
- 平均合并
- 1 天 17 小时
- 30 天内合并 PR
- 78
描述
### Feature Request / Improvement
Similar to Spark, we would like to implement Merge-on-Read mode of deleting, by creating delete files that encode position and equality delete markers that can be applied within a given partition.
https://iceberg.apache.org/spec/?h=delete+files#row-level-deletes
贡献指南
这个仓库没有索引到贡献指南
调研方向
首先阅读 issue 中链接的 Apache Iceberg 行级删除规范，然后将其中对位置删除和等值删除的要求与现有的 PyIceberg 删除行为进行比较。定义受支持的 Merge-on-Read 范围，并验证删除标记可以在分区内应用，包括针对两种删除类型的测试。
由索引模型根据 Issue 内容生成。
评估
- 技术栈
- python, spark
- 领域
- data-engineering, databases
- Issue 类型
- 功能
- 难度
- 5/5
- 预计耗时
- 一周以上
- 活跃度
- 冷清
- 描述清晰度
- 需要澄清
- 新手友好度
- 35/100