apache / apache/iceberg-python
Support rewrite_manifests table maintenance
- Langage dominant
- Python
- Étoiles
- 1.1k
- Forks
- 581
- Merge moyen
- 1 j 17 h
- PR mergées (30 j)
- 77
Description
### Feature Request / Improvement
Rewriting manifests without changing data speeds up scan planning when a table has accumulated many small manifests. Java exposes this as `Table.rewriteManifests()` (Spark: `rewrite_manifests`).
Scope: an explicit maintenance operation that reads the current snapshot's manifests, regroups entries, rewrites them preserving sequence numbers (entries rewritten as EXISTING) and, for V3, `first_row_id`, and commits a `replace` snapshot. Related: #270 tracks automatic manifest merging on write; this covers the explicit maintenance API.
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Localisez le point d’entrée Python de maintenance/API des tables correspondant à Table.rewriteManifests() ; lisez d’abord les chemins actuels des snapshots et de la gestion des manifestes. C’est terminé lorsqu’une opération explicite regroupe les manifestes actuels, préserve les numéros de séquence et V3 first_row_id, marque les entrées réécrites comme EXISTING et valide un snapshot de remplacement.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- python
- Domaine
- databases
- Type d'issue
- Fonctionnalité
- Difficulté
- 5/5
- Temps estimé
- Plus d'une semaine
- Activité
- Calme
- Clarté
- Plutôt claire
- Accessibilité débutants
- 38/100