awslabs / awslabs/python-deequ
External Json interface to define constraints
- Lingua principale
- Jupyter Notebook
- Stelle
- 826
- Fork
- 158
- Merge medio
- 9g 22h
- PR unite (30g)
- 3
Descrizione
**Is your feature request related to a problem? Please describe.**
The library provides excellent capabilty to run data quality rules at scale
However it would be great if the caller could define all the constraints in an external json to decouple the actual rules from the code
**Describe the solution you'd like**
Provide an interface to provide a json of multiple constraints that could be applied to datasets
**Describe alternatives you've considered**
At this stage tge proposed feature is still high level
**Additional context**
Providing a further abstraction of maintaining the dq rules will enable a more wider audience to create them and increase usage
Guida per i contributori
Apri la guida per i contributori
Direzione di ricerca
Inizia esaminando l’API Python esistente per le regole di qualità dei dati e il modo in cui i vincoli sono attualmente definiti e applicati ai dataset. Chiarisci lo schema JSON e l’interfaccia per più vincoli prima dell’implementazione; il lavoro è completato quando i chiamanti possono fornire regole JSON esterne che vengono applicate correttamente senza incorporarle nel codice.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- data-engineering
- Tipo di issue
- Funzionalità
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Stato di attività
- Tranquilla
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 25/100