Persist write configuration to parquet files
- Vorherrschende Sprache
- Java
- Sterne
- 3.1k
- Forks
- 1.6k
- Ø Merge
- 3 T. 12 Std.
- Gemergte PRs (30 T.)
- 33
Beschreibung
### Describe the enhancement requested
The writer configuration influences the nature of the parquet file and often required for debugging and posterity.
Application logs are temporary and wiped after a few days.
Support configurable behaviour which can pass the writer configuration to the parquet footer optionally.
### Component(s)
_No response_
Beitragsleitfaden
Für dieses Repository ist kein Beitragsleitfaden indexiert
Rechercherichtung
Das Issue nennt keine Dateien, Tests oder Einstiegspunkte. Beginne damit nachzuverfolgen, wie die Writer-Konfiguration und Parquet-Footer-Metadaten behandelt werden, und bestimme dann die Form der Konfiguration und das optionale Persistenzverhalten. Als abgeschlossen gilt, wenn die ausgewählte Writer-Konfiguration bei Aktivierung aus dem Footer wiederhergestellt werden kann und das Standardverhalten erhalten bleibt.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- java
- Bereich
- data-engineering
- Issue-Typ
- Feature
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 42/100