AbsaOSS / AbsaOSS/pramen

Stateful data checks for ingestion and other types of jobs

未关闭
#220 2 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
DE DS enhancement Pramen-Scala
主要语言
Scala
星标
31
派生
4
平均合并
1 天 10 分钟
30 天内合并 PR
4

描述

## Background
TBD

## Feature
Stateful data checks for ingestion and other types of jobs

## Example
- Check that the number of records in the ingested snapshot today does not deviate too much from the one ingested for the previous day
- Similar checks for transformers and sinks

## Proposed Solution
- Should be configuration-only solution

贡献指南

这个仓库没有索引到贡献指南

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。