AbsaOSS / AbsaOSS/cobrix

Variable length record parsing

Aperta
#604 2 commenti 0 reazioni 0 assegnatari Vedi su GitHub
question
Lingua principale
Scala
Stelle
170
Fork
96
Merge medio
57m
PR unite (30g)
2

Descrizione

## Background [Optional]
I have multi layout file with certain order.
I group each layout and last layout is repeated multiple times.

each layout is fixed length file(200 bytes).

Example:
1.FH
2.LH
3.BH1
4.DE1
5.AD
:
:
10.DE2
11.AD
:
13.BH2
14.DE1
15.AD
:
:

I rearrange layouts like
FH,LH,BH1,DE1,{4 bytes count of AD}Array[AD]
FH,LH,BH1,DE2,{4 bytes count of AD}Array[AD]
FH,LH,BH2,DE1,{4 bytes count of AD}Array[AD]
FH,LH,BH2,DE2,{4 bytes count of AD}Array[AD]

## Question

How do I parse RDD[Array[Bytes]] using framework?

‘’’
import za.co.absa.cobrix.spark.cobol.Cobrix

val rdd = ???
val df = Cobrix.fromRdd
.copybookContents(copybook)
.option("encoding", "ebcdic") // any supported option
.load(rdd)

‘’’

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Valutazione

Questa issue non è ancora stata valutata.

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.