apache / apache/arrow-java

[Java] nullable arrow schema write to parquet error

Aperta
#89 0 commenti 0 reazioni 0 assegnatari Vedi su GitHub
Lingua principale
Java
Stelle
94
Fork
152
Merge medio
3g 16h
PR unite (30g)
11

Descrizione

### Describe the usage question you have. Please include as many useful details as possible.

When I convert nullable avro schema to nullable arrow schema and write as parquet file, meet a exception

"Unhandled type for Arrow to Parquet schema conversion: sparse_union"

It seems arrow-avro not support SPARE_UNION

how can I use nullable schema in arrow, please help me.

### Component(s)

Java

Guida per i contributori

Apri la guida per i contributori

Direzione di ricerca

Inizia riproducendo la conversione segnalata da uno schema Avro nullable a uno schema Arrow nullable, quindi scrivilo come file Parquet e acquisisci l’errore sparse_union. Conferma se il percorso di conversione supporta questo schema e documenta il comportamento previsto o la limitazione; nell’issue non sono identificati file sorgente o test.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
java
Ambito
data-engineering
Tipo di issue
Bug
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Da chiarire
Idoneità per principianti
30/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.