EducationalTestingService / EducationalTestingService/rsmtool
Improve confusion matrix and score distributions
- Langage dominant
- Python
- Étoiles
- 71
- Forks
- 21
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Description
Right now, the confusion matrix and the score distribution plots rely entirely on the test set human scores. This means that if there are, say, 6s in the training data but none in the test data, the confusion matrix will only be 5x5 and the score distribution plot will only show 5 bars. Perhaps it would be better to take the union of the human scores from both the training and the test sets?
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Localisez le code qui construit les graphiques de matrice de confusion et de distribution des scores, puis suivez la manière dont les scores humains sont collectés à partir des ensembles d’entraînement et de test. Mettez à jour les graphiques afin que leurs catégories de scores utilisent l’union des deux ensembles, et vérifiez que les scores présents uniquement dans l’entraînement apparaissent toujours dans les deux visualisations.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- python
- Domaine
- data-visualization, machine-learning
- Type d'issue
- Fonctionnalité
- Difficulté
- 3/5
- Temps estimé
- 1-2 jours
- Activité
- À l'abandon
- Clarté
- Plutôt claire
- Accessibilité débutants
- 35/100