dotnet / dotnet/machinelearning-samples
wikiDetoxAnnotated40kRows.tsv unreliable?
- Vorherrschende Sprache
- PowerShell
- Sterne
- 4.7k
- Forks
- 2.7k
- Ø Merge
- 2 T. 22 Std.
- Gemergte PRs (30 T.)
- 1
Beschreibung
Not sure where to post this. but the wikiDetox dataset used in the tutorial for Sentiment Analysis seems unreliable. 22k neutral vs 2k negative comments gives a very low recall. Having an function that would just returns false for every testing data would have a precision of 90%.
Beitragsleitfaden
Rechercherichtung
Beginne damit, das Tutorial zur Sentiment-Analyse und dessen Dataset wikiDetoxAnnotated40kRows.tsv zu finden. Überprüfe das gemeldete Ungleichgewicht der Labels und bewerte, wie es Recall und Precision beeinflusst. Ermittle anschließend, ob das Dataset, die Evaluierung des Tutorials oder beides dafür verantwortlich ist. Als erledigt gilt die Aufgabe, wenn das Problem reproduziert und eine konkrete Korrektur oder eine dokumentierte Entscheidung identifiziert wurde.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- machine-learning
- Bereich
- machine-learning
- Issue-Typ
- Bug
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 25/100