AbsaOSS / AbsaOSS/enceladus

SparkSession conformance rule shouldn't kill whole job if key missing

オープン
#543 コメント 2 件 リアクション 0 件 担当者 0 名 GitHub で見る
Conformance feature Menas priority: undecided under discussion
主要言語
Scala
スター
33
フォーク
16
PR マージ指標
30日以内にマージされた PR はありません

説明

## Background
When SparkSession conformance rule is unable to find a key that the user has inputted, it kills the whole spark conformance job. This is unexpected.

error: `Exception in thread "main" java.util.NoSuchElementException: XXX`

## Feature
Instead of kill off the job, populate errCol with an apropriate message of not finding the key and put null in the column.

コントリビューションガイド

コントリビューションガイドを開く

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。