EducationalTestingService/rsmtool

Voir sur GitHub

A Python package to facilitate research on building and evaluating automated scoring models.

Étoiles: 71
Forks: 21
Issues débutants ouvertes: 0
Issues indexées: 46

Langage dominant: Python
Licence: Apache-2.0
Dernier push GitHub: 27/12/2024
Dernière indexation: 15/9/2026
Guide de contribution: Aucun guide de contribution
Code de conduite: Aucun code de conduite
Labels débutants: help wanted good first issue
Métriques de merge des PR: Aucune PR mergée en 30 j

Ouverte Toutes

46 issues ouvertes indexées

Save RSMCompare outputs Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#125 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Improve confusion matrix and score distributions Ouverte

enhancement

EducationalTestingService/rsmtool#151 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
More prominent warning for classifiers that do not support expected probabilities Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#196 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add more analyses to RSMCompare/RSMSummarize Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#260 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Allow `features` to take a list of dictionaries Ouverte

enhancement

EducationalTestingService/rsmtool#298 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Capture warning message from notebook Ouverte

enhancement

EducationalTestingService/rsmtool#320 · 0 commentaires · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
The name of human score column in RSMPredict Ouverte

EducationalTestingService/rsmtool#329 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Match the terminology between RSMTool and RSMCompare Ouverte

EducationalTestingService/rsmtool#330 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Highlight non-zero differences in RSMCompare Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#332 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Improve RSMSummarize and RSMCompare tutorials Ouverte

documentation

EducationalTestingService/rsmtool#333 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Look into parallelization Ouverte

EducationalTestingService/rsmtool#334 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
More flexible treatment of continuous co-variates Ouverte

enhancement

EducationalTestingService/rsmtool#335 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Provide descriptives for all features, not just those in the final model Ouverte

enhancement

EducationalTestingService/rsmtool#336 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Consistently show in the report if the features were standardized Ouverte

EducationalTestingService/rsmtool#337 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Compute metrics for all data once Ouverte

enhancement

EducationalTestingService/rsmtool#338 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add consistency to RSMSummarize output Ouverte

enhancement good first issue

EducationalTestingService/rsmtool#340 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Generate predictions for responses with non-numeric human scores Ouverte

enhancement

EducationalTestingService/rsmtool#341 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Kappa computation when predicted scores are on a different scale Ouverte

bug

EducationalTestingService/rsmtool#342 · 10 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Resource warning when running tests Ouverte

enhancement

EducationalTestingService/rsmtool#346 · 8 commentaires · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
Try solution for kernel RuntimeErrors Ouverte

enhancement

EducationalTestingService/rsmtool#350 · 2 commentaires · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
Modify tests to fix warnings based on SKLL hyperparameters Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#360 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Capture incorrect input to correlations Ouverte

enhancement

EducationalTestingService/rsmtool#365 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Consistent approach to warnings Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#367 · 5 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Replace all path operations and functions with `pathlib` Ouverte

good first issue help wanted

EducationalTestingService/rsmtool#370 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Exclude unnecessary packages from conda-recipe Ouverte

enhancement

EducationalTestingService/rsmtool#374 · 0 commentaires · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
Investigate whether we can use any visualizers from Yellowbrick Ouverte

enhancement help wanted

EducationalTestingService/rsmtool#383 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Make sure that everything that accepts paths also accepts pathlib.Path Ouverte

enhancement

EducationalTestingService/rsmtool#385 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Output file or directory in rsmpredict Ouverte

enhancement

EducationalTestingService/rsmtool#396 · 3 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Allow config dictionary to contain dataframe rather than path to a file Ouverte

EducationalTestingService/rsmtool#399 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add suppress_warnings argument to various metrics Ouverte

enhancement

EducationalTestingService/rsmtool#411 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
QWK generates runtime warning Ouverte

EducationalTestingService/rsmtool#440 · 1 commentaire · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
Tests for notebooks Ouverte

EducationalTestingService/rsmtool#470 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add option for NaNs to be converted to 0s Ouverte

EducationalTestingService/rsmtool#480 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Run nbqa on our notebooks and integrate into workflow Ouverte

enhancement

EducationalTestingService/rsmtool#481 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Rename argument name in `configuration_parser.check_flag_column()` Ouverte

enhancement

EducationalTestingService/rsmtool#485 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Consider refactoring SMD code/changing documentation. Ouverte

EducationalTestingService/rsmtool#489 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Deprecate _modify_eval_columns_to_ensure_version_compatibilty in RSMCompare Ouverte

EducationalTestingService/rsmtool#490 · 2 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Rewrite docstrings to match scikit-learn Style Ouverte

documentation enhancement help wanted

EducationalTestingService/rsmtool#491 · 1 commentaire · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add support for SKLL Voting Learners Ouverte

enhancement

EducationalTestingService/rsmtool#512 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Use raw predictions in tutorial Ouverte

documentation good first issue

EducationalTestingService/rsmtool#524 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Simplify sign in subset_feature_selection Ouverte

enhancement

EducationalTestingService/rsmtool#529 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Streamline the code for flagging warnings in the reports Ouverte

good first issue help wanted

EducationalTestingService/rsmtool#539 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
New method for predicting from coefficients Ouverte

enhancement

EducationalTestingService/rsmtool#545 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Add support for sections in rsmxval Ouverte

EducationalTestingService/rsmtool#557 · 0 commentaires · 0 réactions · 1 personne assignée · Indexée le 15/9/2026
Log additional intermediate files to W&B Ouverte

enhancement

EducationalTestingService/rsmtool#630 · 0 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026
Slim installation option or model inference export option Ouverte

EducationalTestingService/rsmtool#689 · 5 commentaires · 0 réactions · 0 personnes assignées · Indexée le 15/9/2026

EducationalTestingService/rsmtool

Recevez les nouvelles issues par e-mail