dotnet / dotnet/machinelearning-samples

wikiDetoxAnnotated40kRows.tsv unreliable?

Aperta
#346 2 commenti 1 reazione 0 assegnatari Vedi su GitHub
need-further-analysis
Lingua principale
PowerShell
Stelle
4.7k
Fork
2.7k
Merge medio
2g 22h
PR unite (30g)
1

Descrizione

Not sure where to post this. but the wikiDetox dataset used in the tutorial for Sentiment Analysis seems unreliable. 22k neutral vs 2k negative comments gives a very low recall. Having an function that would just returns false for every testing data would have a precision of 90%.

Guida per i contributori

Apri la guida per i contributori

Direzione di ricerca

Inizia individuando il tutorial sull’analisi del sentiment e il relativo dataset wikiDetoxAnnotated40kRows.tsv. Verifica lo squilibrio delle label segnalato e valuta come influisce su recall e precision, quindi determina se la responsabilità è del dataset, della valutazione del tutorial o di entrambi. Il lavoro sarà considerato completato quando il problema sarà stato riprodotto e sarà stata identificata una correzione specifica o una decisione documentata.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
machine-learning
Ambito
machine-learning
Tipo di issue
Bug
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Da chiarire
Idoneità per principianti
25/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.