Continue to break datafusion crate into smaller crates
Nessuno ha ancora preso questa issue.
- Lingua principale
- Rust
- Stelle
- 9.3k
- Fork
- 2.4k
- Merge medio
- 3g 6h
- PR unite (30g)
- 363
Descrizione
Is your feature request related to a problem or challenge? Please describe what you are trying to do.
Quoting @Jimexist on https://github.com/apache/arrow-datafusion/issues/1750
It helps with code management and dependency reasoning
Also I have heard annecdotal reports that compiling datafusion takes too long / too much memory to compile which is sad.
Describe the solution you'd like
- #5405
- Split out file_formats (maybe parquet gets its own?)
- https://github.com/apache/arrow-datafusion/issues/1754
Describe alternatives you've considered
Leave as is
Additional context
First part of split was in https://github.com/apache/arrow-datafusion/issues/1750, driven by @Jimexist ❤️
Guida per i contributori
Apri la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Inizia esaminando l’issue di riferimento #5405 e la precedente suddivisione nell’issue #1754, quindi analizza come è organizzato il codice rimanente di file_formats. Il lavoro sarà completo quando saranno concordati e implementati i confini rimanenti tra le crate, inclusa la decisione se Parquet debba avere una crate propria, affrontando al contempo le problematiche indicate relative alla gestione del codice e alla compilazione.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- rust
- Ambito
- build-system, developer-experience
- Tipo di issue
- Refactoring
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 25/100