AbsaOSS / AbsaOSS/enceladus

Data quality thresholds

オープン
#1,995 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
Epic priority: undecided
主要言語
Scala
スター
33
フォーク
16
PR マージ指標
30日以内にマージされた PR はありません

説明

## Background
Teams want to know if data processing encountered too many errors

## Goal
Make it possible to set limits of errors and fail the job if any of them is reached.

## Expected Task List
A list of expected issues that will be needed to achieve this Epic
1. Create the data model for limiting (absolute and percentage limits)
2. Add counting of errors (those, that are missing and if required by a set limit)
3. Comparison of error counts with limits, fail on breach
4. UI to enable adding the limits to datasets
5. Global limits?
6. Notification plugins to inform about the limit breach

コントリビューションガイド

コントリビューションガイドを開く

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。