apache / apache/datafusion-benchmarks

Floats in TPC-DS data

Aperta
#32 0 commenti 0 reazioni 0 assegnatari Vedi su GitHub
Lingua principale
Python
Stelle
23
Fork
19
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

Integer columns have `double` type in TPC-DS.

This leads to some planning weirdness in DataFusion, as it can not estimate cardinality based on float datatypes.

We should keep the original types.

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Esamina come vengono generati o convertiti gli schemi dei dati TPC-DS, quindi individua dove le colonne intere diventano double per DataFusion. Il lavoro è completato quando il benchmark conserva i tipi interi originali e non li presenta più come dati in virgola mobile.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
python
Ambito
data-engineering, databases
Tipo di issue
Bug
Difficoltà
3/5
Tempo stimato
1-2 giorni
Stato di attività
Tranquilla
Chiarezza
Abbastanza chiara
Idoneità per principianti
55/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.