alteryx / alteryx/evalml

Add label leakage check after training models in AutoML

Aperta
#928 1 commento 0 reazioni 1 assegnatario Rivendicata da @asniyaz Vedi su GitHub
new feature
Lingua principale
Python
Stelle
850
Fork
96
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

Per @kmax12's comment in #917, we could do a label leakage check after training a model, checking if it scored very highly but only has a single feature with all the importance. This could indicate that the feature that scored highly is correlated to the target.

This would need a little more design: currently, we only perform any data checks before searching. How should we support data checks (or only some data checks) running after a batch / iteration?

Guida per i contributori

Apri la guida per i contributori

Valutazione

Questa issue non è ancora stata valutata.

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.