Support for stream processing variable length records
Aberta
question
- Linguagem predominante
- Scala
- Estrelas
- 170
- Forks
- 96
- Merge médio
- 57min
- PRs com merge (30d)
- 2
Descrição
@yruslan
I have large set of input files for processing. I wanted to take the stream processing approach. But, when i tried with the same options that i have successfully used for variable length records, like,
`
.option("generate_record_id", true)
.option("is_record_sequence", "true")
.option("is_rdw_big_endian", "true")
.option("variable_size_occurs", "true")
`
It was getting processed as FixedLength records.
Any thoughts or suggestions?
Guia de contribuição
Nenhum guia de contribuição indexado para este repositório
Avaliação
Esta issue ainda não foi avaliada.