[Java] nullable arrow schema write to parquet error
- Linguagem predominante
- Java
- Estrelas
- 94
- Forks
- 152
- Merge médio
- 3d 16h
- PRs com merge (30d)
- 11
Descrição
### Describe the usage question you have. Please include as many useful details as possible.
When I convert nullable avro schema to nullable arrow schema and write as parquet file, meet a exception
"Unhandled type for Arrow to Parquet schema conversion: sparse_union"
It seems arrow-avro not support SPARE_UNION
how can I use nullable schema in arrow, please help me.
### Component(s)
Java
Guia de contribuição
Direção de pesquisa
Comece reproduzindo a conversão relatada de um schema Avro nullable para um schema Arrow nullable, depois escreva-o como um arquivo Parquet e capture a falha de sparse_union. Confirme se o caminho de conversão oferece suporte a esse schema e documente o comportamento esperado ou a limitação; nenhum arquivo-fonte ou teste é identificado na issue.
Escrita pelo modelo de indexação a partir do texto da issue.
Avaliação
- Stack de tecnologia
- java
- Domínio
- data-engineering
- Tipo de issue
- Bug
- Dificuldade
- 4/5
- Tempo estimado
- 3-5 dias
- Status de atividade
- Estagnada
- Clareza
- Precisa de esclarecimento
- Facilidade para iniciantes
- 30/100