Maybe we should eventually move the `parquet_pruning` option out of `SessionContext` and into the `ParquetReadOptions` structure. As a follow on PR
Offen
- Vorherrschende Sprache
- Rust
- Sterne
- 9.3k
- Forks
- 2.4k
- Ø Merge
- 3 T. 11 Std.
- Gemergte PRs (30 T.)
- 360
Beschreibung
Maybe we should eventually move the `parquet_pruning` option out of `SessionContext` and into the `ParquetReadOptions` structure. As a follow on PR
_Originally posted by @alamb in https://github.com/apache/arrow-datafusion/pull/2099#discussion_r841063796_
Beitragsleitfaden
Rechercherichtung
Beginne damit, SessionContext, ParquetReadOptions und die aktuelle Handhabung von parquet_pruning im DataFusion-Quellcode zu finden. Verfolge, wie die Option gelesen und bei Parquet-Scans weitergegeben wird. Abgeschlossen ist die Aufgabe, wenn parquet_pruning von ParquetReadOptions statt von SessionContext verwaltet wird und das betroffene Verhalten sowie die Tests aktualisiert sind.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- rust
- Bereich
- data-engineering
- Issue-Typ
- Refactoring
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 25/100