dotnet / dotnet/machinelearning-samples

wikiDetoxAnnotated40kRows.tsv unreliable?

Offen
#346 2 Kommentare 1 Reaktion 0 zugewiesene Personen Auf GitHub ansehen
need-further-analysis
Vorherrschende Sprache
PowerShell
Sterne
4.7k
Forks
2.7k
Ø Merge
2 T. 22 Std.
Gemergte PRs (30 T.)
1

Beschreibung

Not sure where to post this. but the wikiDetox dataset used in the tutorial for Sentiment Analysis seems unreliable. 22k neutral vs 2k negative comments gives a very low recall. Having an function that would just returns false for every testing data would have a precision of 90%.

Beitragsleitfaden

Beitragsleitfaden öffnen

Rechercherichtung

Beginne damit, das Tutorial zur Sentiment-Analyse und dessen Dataset wikiDetoxAnnotated40kRows.tsv zu finden. Überprüfe das gemeldete Ungleichgewicht der Labels und bewerte, wie es Recall und Precision beeinflusst. Ermittle anschließend, ob das Dataset, die Evaluierung des Tutorials oder beides dafür verantwortlich ist. Als erledigt gilt die Aufgabe, wenn das Problem reproduziert und eine konkrete Korrektur oder eine dokumentierte Entscheidung identifiziert wurde.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
machine-learning
Bereich
machine-learning
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.