AbsaOSS / AbsaOSS/enceladus

Enforce quality of metadata that comes from raw INFO files

オープン
#875 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
feature priority: undecided request Standardization under discussion
主要言語
Scala
スター
33
フォーク
16
PR マージ指標
30日以内にマージされた PR はありません

説明

## Background
Currently, Enceladus doesn't validate INFO files. It could be helpful for downstream analysis to validate if specific mandatory fields are present and/or in the correct format.

## Feature
Make Standardization refuse to process the data if the provided INFO file does not pass the validation.

## Example [Optional]
* Add validation of the country code field and make sure it has a valid value.
* Add `frequency` field as part of INFO metadata to track how often data is ingested (clarification needed).
* Report date should have a specific format ('yyyy-MM-dd').

コントリビューションガイド

コントリビューションガイドを開く

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。