apache / apache/iceberg-python

[Feat] Support Merge-on-Read mode for Deletes

Ouverte
#1,078 7 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
1.1k
Forks
581
Merge moyen
1 j 17 h
PR mergées (30 j)
78

Description

### Feature Request / Improvement

Similar to Spark, we would like to implement Merge-on-Read mode of deleting, by creating delete files that encode position and equality delete markers that can be applied within a given partition.

https://iceberg.apache.org/spec/?h=delete+files#row-level-deletes

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Commencez par lire la spécification des suppressions au niveau des lignes d’Apache Iceberg référencée dans l’issue, puis comparez ses exigences relatives aux suppressions par position et par égalité avec le comportement de suppression existant de PyIceberg. Définissez le périmètre pris en charge de Merge-on-Read et vérifiez que les marqueurs de suppression peuvent être appliqués au sein d’une partition, avec des tests pour les deux types de suppression.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python, spark
Domaine
data-engineering, databases
Type d'issue
Fonctionnalité
Difficulté
5/5
Temps estimé
Plus d'une semaine
Activité
Calme
Clarté
À clarifier
Accessibilité débutants
35/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.