apache / apache/iceberg-python

Support rewrite_manifests table maintenance

Ouverte
#3,629 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
1.1k
Forks
581
Merge moyen
1 j 17 h
PR mergées (30 j)
77

Description

### Feature Request / Improvement

Rewriting manifests without changing data speeds up scan planning when a table has accumulated many small manifests. Java exposes this as `Table.rewriteManifests()` (Spark: `rewrite_manifests`).

Scope: an explicit maintenance operation that reads the current snapshot's manifests, regroups entries, rewrites them preserving sequence numbers (entries rewritten as EXISTING) and, for V3, `first_row_id`, and commits a `replace` snapshot. Related: #270 tracks automatic manifest merging on write; this covers the explicit maintenance API.

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Localisez le point d’entrée Python de maintenance/API des tables correspondant à Table.rewriteManifests() ; lisez d’abord les chemins actuels des snapshots et de la gestion des manifestes. C’est terminé lorsqu’une opération explicite regroupe les manifestes actuels, préserve les numéros de séquence et V3 first_row_id, marque les entrées réécrites comme EXISTING et valide un snapshot de remplacement.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
databases
Type d'issue
Fonctionnalité
Difficulté
5/5
Temps estimé
Plus d'une semaine
Activité
Calme
Clarté
Plutôt claire
Accessibilité débutants
38/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.