awslabs / awslabs/python-deequ
support for Row Level DQ Reports
- Lingua principale
- Jupyter Notebook
- Stelle
- 826
- Fork
- 158
- Merge medio
- 9g 22h
- PR unite (30g)
- 3
Descrizione
Hello folks, it seems u forgot to expose in Python PyDeequ, the following Deequ Scala method, which in turn makes it impossible to use PyDeequ to produce row level DQ report - only column/dataset SUMMARY level DQ reports are possible at the moment
[def rowLevelResultsAsDataFrame( sparkSession: SparkSession, verificationResult: VerificationResult, data: DataFrame): DataFrame = {](https://github.com/awslabs/deequ/blob/master/src/main/scala/com/amazon/deequ/VerificationResult.scala)
why is that, any plans to rectify and when?
Guida per i contributori
Apri la guida per i contributori
Direzione di ricerca
Inizia dal metodo Deequ VerificationResult.scala collegato, quindi esamina come PyDeequ espone i report di verifica esistenti a livello di colonna e di dataset. Determina il corrispondente punto di ingresso dell’API Python e rendi disponibili i risultati a livello di riga come DataFrame; il lavoro è completato quando PyDeequ può produrre il report a livello di riga descritto nell’issue.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python, scala
- Ambito
- api, data-engineering
- Tipo di issue
- Funzionalità
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Tranquilla
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 48/100