apache / apache/iceberg-python
[Feat] Support Merge-on-Read mode for Deletes
- Langage dominant
- Python
- Étoiles
- 1.1k
- Forks
- 581
- Merge moyen
- 1 j 17 h
- PR mergées (30 j)
- 78
Description
### Feature Request / Improvement
Similar to Spark, we would like to implement Merge-on-Read mode of deleting, by creating delete files that encode position and equality delete markers that can be applied within a given partition.
https://iceberg.apache.org/spec/?h=delete+files#row-level-deletes
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Commencez par lire la spécification des suppressions au niveau des lignes d’Apache Iceberg référencée dans l’issue, puis comparez ses exigences relatives aux suppressions par position et par égalité avec le comportement de suppression existant de PyIceberg. Définissez le périmètre pris en charge de Merge-on-Read et vérifiez que les marqueurs de suppression peuvent être appliqués au sein d’une partition, avec des tests pour les deux types de suppression.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- python, spark
- Domaine
- data-engineering, databases
- Type d'issue
- Fonctionnalité
- Difficulté
- 5/5
- Temps estimé
- Plus d'une semaine
- Activité
- Calme
- Clarté
- À clarifier
- Accessibilité débutants
- 35/100