AbsaOSS / AbsaOSS/enceladus

Enforce quality of metadata that comes from raw INFO files

Đang mở
#875 0 bình luận 0 reaction 0 người được giao Xem trên GitHub
feature priority: undecided request Standardization under discussion
Ngôn ngữ chính
Scala
Star
33
Fork
16
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Mô tả

## Background
Currently, Enceladus doesn't validate INFO files. It could be helpful for downstream analysis to validate if specific mandatory fields are present and/or in the correct format.

## Feature
Make Standardization refuse to process the data if the provided INFO file does not pass the validation.

## Example [Optional]
* Add validation of the country code field and make sure it has a valid value.
* Add `frequency` field as part of INFO metadata to track how often data is ingested (clarification needed).
* Report date should have a specific format ('yyyy-MM-dd').

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Đánh giá

Issue này chưa được đánh giá.

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.