AbsaOSS / AbsaOSS/cobrix

Does Cobrix handle the Easytrieve layout ?

オープン
#623 コメント 3 件 リアクション 0 件 担当者 0 名 GitHub で見る
question
主要言語
Scala
スター
170
フォーク
96
平均マージ
57分
マージ済み PR(30日)
2

説明

# Background

I am having the Easytrive layout which is having the Packed unsigned fields (data-type U in Easytrieve), binary unsigned fields (data-type B in Easytrieve) and Alpha-numeric fields (data-type A in Easytrieve and storing Hexbit). The Data file that we are trying to convert is EBCDIC data

# Question

We were using cobrix for couple of files which it worked fine till now. Recently encountered one new file of Easytrieve layout which is not cobol
and we are not able to decode the file into ascii.

We are using below options/parameters to read the file.

> def read_dataframe(spark, copybook):
>     return (
>         spark.read.format("cobol")
>         .option("record_format","F")
>         .option("encoding", "ebcdic")
>         .option("copybook", copybook) #Copybook
>         .option("enable_indexes", "false")
>         .option("input_split_size_mb", "256")
>         .option("drop_value_fillers", "true")
>         .option("drop_group_fillers", "false")
>         .option("generate_record_id", "false")
>         .option("schema_retention_policy", "keep_original")
>         .option("paths", ",".join(data_files)) #EBCIDIC File
>         .load()
>     )

Please find the attached sample data and layout for your reference @yruslan .

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。