AbsaOSS / AbsaOSS/pramen

Stateful data checks for ingestion and other types of jobs

Abierto
#220 2 comentarios 0 reacciones 0 asignados Ver en GitHub
DE DS enhancement Pramen-Scala
Lenguaje dominante
Scala
Estrellas
31
Forks
4
Merge medio
1 d 10 min
PR fusionados (30 d)
4

Descripción

## Background
TBD

## Feature
Stateful data checks for ingestion and other types of jobs

## Example
- Check that the number of records in the ingested snapshot today does not deviate too much from the one ingested for the previous day
- Similar checks for transformers and sinks

## Proposed Solution
- Should be configuration-only solution

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Evaluación

Este issue todavía no se ha evaluado.

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.