EducationalTestingService / EducationalTestingService/rsmtool

Improve confusion matrix and score distributions

Ouverte
#151 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
enhancement
Langage dominant
Python
Étoiles
71
Forks
21
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

Right now, the confusion matrix and the score distribution plots rely entirely on the test set human scores. This means that if there are, say, 6s in the training data but none in the test data, the confusion matrix will only be 5x5 and the score distribution plot will only show 5 bars. Perhaps it would be better to take the union of the human scores from both the training and the test sets?

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Localisez le code qui construit les graphiques de matrice de confusion et de distribution des scores, puis suivez la manière dont les scores humains sont collectés à partir des ensembles d’entraînement et de test. Mettez à jour les graphiques afin que leurs catégories de scores utilisent l’union des deux ensembles, et vérifiez que les scores présents uniquement dans l’entraînement apparaissent toujours dans les deux visualisations.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
data-visualization, machine-learning
Type d'issue
Fonctionnalité
Difficulté
3/5
Temps estimé
1-2 jours
Activité
À l'abandon
Clarté
Plutôt claire
Accessibilité débutants
35/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.