apache / apache/iceberg-python

[Feat] Support Merge-on-Read mode for Deletes

Aperta
#1,078 7 commenti 0 reazioni 0 assegnatari Vedi su GitHub
Lingua principale
Python
Stelle
1.1k
Fork
581
Merge medio
1g 17h
PR unite (30g)
78

Descrizione

### Feature Request / Improvement

Similar to Spark, we would like to implement Merge-on-Read mode of deleting, by creating delete files that encode position and equality delete markers that can be applied within a given partition.

https://iceberg.apache.org/spec/?h=delete+files#row-level-deletes

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Inizia leggendo la specifica delle eliminazioni a livello di riga di Apache Iceberg collegata nell’issue, quindi confronta i requisiti relativi alle eliminazioni per posizione e per uguaglianza con il comportamento di eliminazione esistente di PyIceberg. Definisci l’ambito supportato di Merge-on-Read e verifica che i marker di eliminazione possano essere applicati all’interno di una partizione, includendo test per entrambi i tipi di eliminazione.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
python, spark
Ambito
data-engineering, databases
Tipo di issue
Funzionalità
Difficoltà
5/5
Tempo stimato
Più di una settimana
Stato di attività
Tranquilla
Chiarezza
Da chiarire
Idoneità per principianti
35/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.