awslabs / awslabs/python-deequ

support for row level DQ result-report missing

Aperta
#223 3 commenti 0 reazioni 0 assegnatari Vedi su GitHub
enhancement
Lingua principale
Jupyter Notebook
Stelle
826
Fork
158
Merge medio
9g 22h
PR unite (30g)
3

Descrizione

Hello folks, it seems u forgot to expose in Python PyDeequ, the following Deequ Scala method, which in turn makes it impossible to use PyDeequ to produce row level DQ report - only column/dataset SUMMARY level DQ reports are possible at the moment

[def rowLevelResultsAsDataFrame( sparkSession: SparkSession, verificationResult: VerificationResult, data: DataFrame): DataFrame = {](https://github.com/awslabs/deequ/blob/master/src/main/scala/com/amazon/deequ/VerificationResult.scala)

why is that, any plans to rectify and when?

Guida per i contributori

Apri la guida per i contributori

Direzione di ricerca

Inizia leggendo i binding di PyDeequ e confrontandoli con il metodo rowLevelResultsAsDataFrame di VerificationResult.scala di Deequ, collegato nell'issue. Traccia come i risultati esistenti a livello di riepilogo vengono esposti a Python e individua i test o gli esempi corrispondenti. Il lavoro è completato quando PyDeequ fornisce un report utilizzabile a livello di riga come Spark DataFrame.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
python, scala
Ambito
api, data-engineering
Tipo di issue
Funzionalità
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Tranquilla
Chiarezza
Abbastanza chiara
Idoneità per principianti
50/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.