EducationalTestingService/rsmtool

Ver en GitHub

A Python package to facilitate research on building and evaluating automated scoring models.

Estrellas: 71
Forks: 21
Issues abiertos para principiantes: 0
Issues indexados: 46

Lenguaje dominante: Python
Licencia: Apache-2.0
Último push a GitHub: 27/12/2024
Última indexación: 15/9/2026
Guía de contribución: Sin guía de contribución
Código de conducta: Sin código de conducta
Etiquetas para principiantes: help wanted good first issue
Métricas de merge de PR: Sin PR fusionados en 30 d

Abierto Todos

46 issues abiertos indexados

Save RSMCompare outputs Abierto

enhancement help wanted

EducationalTestingService/rsmtool#125 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Improve confusion matrix and score distributions Abierto

enhancement

EducationalTestingService/rsmtool#151 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
More prominent warning for classifiers that do not support expected probabilities Abierto

enhancement help wanted

EducationalTestingService/rsmtool#196 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add more analyses to RSMCompare/RSMSummarize Abierto

enhancement help wanted

EducationalTestingService/rsmtool#260 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Allow `features` to take a list of dictionaries Abierto

enhancement

EducationalTestingService/rsmtool#298 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Capture warning message from notebook Abierto

enhancement

EducationalTestingService/rsmtool#320 · 0 comentarios · 0 reacciones · 1 asignado · Indexado el 15/9/2026
The name of human score column in RSMPredict Abierto

EducationalTestingService/rsmtool#329 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Match the terminology between RSMTool and RSMCompare Abierto

EducationalTestingService/rsmtool#330 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Highlight non-zero differences in RSMCompare Abierto

enhancement help wanted

EducationalTestingService/rsmtool#332 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Improve RSMSummarize and RSMCompare tutorials Abierto

documentation

EducationalTestingService/rsmtool#333 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Look into parallelization Abierto

EducationalTestingService/rsmtool#334 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
More flexible treatment of continuous co-variates Abierto

enhancement

EducationalTestingService/rsmtool#335 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Provide descriptives for all features, not just those in the final model Abierto

enhancement

EducationalTestingService/rsmtool#336 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Consistently show in the report if the features were standardized Abierto

EducationalTestingService/rsmtool#337 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Compute metrics for all data once Abierto

enhancement

EducationalTestingService/rsmtool#338 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add consistency to RSMSummarize output Abierto

enhancement good first issue

EducationalTestingService/rsmtool#340 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Generate predictions for responses with non-numeric human scores Abierto

enhancement

EducationalTestingService/rsmtool#341 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Kappa computation when predicted scores are on a different scale Abierto

bug

EducationalTestingService/rsmtool#342 · 10 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Resource warning when running tests Abierto

enhancement

EducationalTestingService/rsmtool#346 · 8 comentarios · 0 reacciones · 1 asignado · Indexado el 15/9/2026
Try solution for kernel RuntimeErrors Abierto

enhancement

EducationalTestingService/rsmtool#350 · 2 comentarios · 0 reacciones · 1 asignado · Indexado el 15/9/2026
Modify tests to fix warnings based on SKLL hyperparameters Abierto

enhancement help wanted

EducationalTestingService/rsmtool#360 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Capture incorrect input to correlations Abierto

enhancement

EducationalTestingService/rsmtool#365 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Consistent approach to warnings Abierto

enhancement help wanted

EducationalTestingService/rsmtool#367 · 5 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Replace all path operations and functions with `pathlib` Abierto

good first issue help wanted

EducationalTestingService/rsmtool#370 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Exclude unnecessary packages from conda-recipe Abierto

enhancement

EducationalTestingService/rsmtool#374 · 0 comentarios · 0 reacciones · 1 asignado · Indexado el 15/9/2026
Investigate whether we can use any visualizers from Yellowbrick Abierto

enhancement help wanted

EducationalTestingService/rsmtool#383 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Make sure that everything that accepts paths also accepts pathlib.Path Abierto

enhancement

EducationalTestingService/rsmtool#385 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Output file or directory in rsmpredict Abierto

enhancement

EducationalTestingService/rsmtool#396 · 3 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Allow config dictionary to contain dataframe rather than path to a file Abierto

EducationalTestingService/rsmtool#399 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add suppress_warnings argument to various metrics Abierto

enhancement

EducationalTestingService/rsmtool#411 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
QWK generates runtime warning Abierto

EducationalTestingService/rsmtool#440 · 1 comentario · 0 reacciones · 1 asignado · Indexado el 15/9/2026
Tests for notebooks Abierto

EducationalTestingService/rsmtool#470 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add option for NaNs to be converted to 0s Abierto

EducationalTestingService/rsmtool#480 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Run nbqa on our notebooks and integrate into workflow Abierto

enhancement

EducationalTestingService/rsmtool#481 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Rename argument name in `configuration_parser.check_flag_column()` Abierto

enhancement

EducationalTestingService/rsmtool#485 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Consider refactoring SMD code/changing documentation. Abierto

EducationalTestingService/rsmtool#489 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Deprecate _modify_eval_columns_to_ensure_version_compatibilty in RSMCompare Abierto

EducationalTestingService/rsmtool#490 · 2 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Rewrite docstrings to match scikit-learn Style Abierto

documentation enhancement help wanted

EducationalTestingService/rsmtool#491 · 1 comentario · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add support for SKLL Voting Learners Abierto

enhancement

EducationalTestingService/rsmtool#512 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Use raw predictions in tutorial Abierto

documentation good first issue

EducationalTestingService/rsmtool#524 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Simplify sign in subset_feature_selection Abierto

enhancement

EducationalTestingService/rsmtool#529 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Streamline the code for flagging warnings in the reports Abierto

good first issue help wanted

EducationalTestingService/rsmtool#539 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
New method for predicting from coefficients Abierto

enhancement

EducationalTestingService/rsmtool#545 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Add support for sections in rsmxval Abierto

EducationalTestingService/rsmtool#557 · 0 comentarios · 0 reacciones · 1 asignado · Indexado el 15/9/2026
Log additional intermediate files to W&B Abierto

enhancement

EducationalTestingService/rsmtool#630 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026
Slim installation option or model inference export option Abierto

EducationalTestingService/rsmtool#689 · 5 comentarios · 0 reacciones · 0 asignados · Indexado el 15/9/2026

EducationalTestingService/rsmtool

Recibe los nuevos issues en tu correo