EducationalTestingService/rsmtool

Vedi su GitHub

A Python package to facilitate research on building and evaluating automated scoring models.

Stelle: 71
Fork: 21
Issue aperte per principianti: 0
Issue indicizzate: 46

Lingua principale: Python
Licenza: Apache-2.0
Ultimo push su GitHub: 27/12/2024
Ultima indicizzazione: 15/9/2026
Guida per i contributori: Nessuna guida per i contributori
Codice di condotta: Nessun codice di condotta
Label per principianti: help wanted good first issue
Metriche di merge delle PR: Nessuna PR unita negli ultimi 30g

Aperta Tutte

46 issue aperte indicizzate

Save RSMCompare outputs Aperta

enhancement help wanted

EducationalTestingService/rsmtool#125 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Improve confusion matrix and score distributions Aperta

enhancement

EducationalTestingService/rsmtool#151 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
More prominent warning for classifiers that do not support expected probabilities Aperta

enhancement help wanted

EducationalTestingService/rsmtool#196 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add more analyses to RSMCompare/RSMSummarize Aperta

enhancement help wanted

EducationalTestingService/rsmtool#260 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Allow `features` to take a list of dictionaries Aperta

enhancement

EducationalTestingService/rsmtool#298 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Capture warning message from notebook Aperta

enhancement

EducationalTestingService/rsmtool#320 · 0 commenti · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
The name of human score column in RSMPredict Aperta

EducationalTestingService/rsmtool#329 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Match the terminology between RSMTool and RSMCompare Aperta

EducationalTestingService/rsmtool#330 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Highlight non-zero differences in RSMCompare Aperta

enhancement help wanted

EducationalTestingService/rsmtool#332 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Improve RSMSummarize and RSMCompare tutorials Aperta

documentation

EducationalTestingService/rsmtool#333 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Look into parallelization Aperta

EducationalTestingService/rsmtool#334 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
More flexible treatment of continuous co-variates Aperta

enhancement

EducationalTestingService/rsmtool#335 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Provide descriptives for all features, not just those in the final model Aperta

enhancement

EducationalTestingService/rsmtool#336 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Consistently show in the report if the features were standardized Aperta

EducationalTestingService/rsmtool#337 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Compute metrics for all data once Aperta

enhancement

EducationalTestingService/rsmtool#338 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add consistency to RSMSummarize output Aperta

enhancement good first issue

EducationalTestingService/rsmtool#340 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Generate predictions for responses with non-numeric human scores Aperta

enhancement

EducationalTestingService/rsmtool#341 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Kappa computation when predicted scores are on a different scale Aperta

bug

EducationalTestingService/rsmtool#342 · 10 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Resource warning when running tests Aperta

enhancement

EducationalTestingService/rsmtool#346 · 8 commenti · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
Try solution for kernel RuntimeErrors Aperta

enhancement

EducationalTestingService/rsmtool#350 · 2 commenti · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
Modify tests to fix warnings based on SKLL hyperparameters Aperta

enhancement help wanted

EducationalTestingService/rsmtool#360 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Capture incorrect input to correlations Aperta

enhancement

EducationalTestingService/rsmtool#365 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Consistent approach to warnings Aperta

enhancement help wanted

EducationalTestingService/rsmtool#367 · 5 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Replace all path operations and functions with `pathlib` Aperta

good first issue help wanted

EducationalTestingService/rsmtool#370 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Exclude unnecessary packages from conda-recipe Aperta

enhancement

EducationalTestingService/rsmtool#374 · 0 commenti · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
Investigate whether we can use any visualizers from Yellowbrick Aperta

enhancement help wanted

EducationalTestingService/rsmtool#383 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Make sure that everything that accepts paths also accepts pathlib.Path Aperta

enhancement

EducationalTestingService/rsmtool#385 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Output file or directory in rsmpredict Aperta

enhancement

EducationalTestingService/rsmtool#396 · 3 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Allow config dictionary to contain dataframe rather than path to a file Aperta

EducationalTestingService/rsmtool#399 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add suppress_warnings argument to various metrics Aperta

enhancement

EducationalTestingService/rsmtool#411 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
QWK generates runtime warning Aperta

EducationalTestingService/rsmtool#440 · 1 commento · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
Tests for notebooks Aperta

EducationalTestingService/rsmtool#470 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add option for NaNs to be converted to 0s Aperta

EducationalTestingService/rsmtool#480 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Run nbqa on our notebooks and integrate into workflow Aperta

enhancement

EducationalTestingService/rsmtool#481 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Rename argument name in `configuration_parser.check_flag_column()` Aperta

enhancement

EducationalTestingService/rsmtool#485 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Consider refactoring SMD code/changing documentation. Aperta

EducationalTestingService/rsmtool#489 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Deprecate _modify_eval_columns_to_ensure_version_compatibilty in RSMCompare Aperta

EducationalTestingService/rsmtool#490 · 2 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Rewrite docstrings to match scikit-learn Style Aperta

documentation enhancement help wanted

EducationalTestingService/rsmtool#491 · 1 commento · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add support for SKLL Voting Learners Aperta

enhancement

EducationalTestingService/rsmtool#512 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Use raw predictions in tutorial Aperta

documentation good first issue

EducationalTestingService/rsmtool#524 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Simplify sign in subset_feature_selection Aperta

enhancement

EducationalTestingService/rsmtool#529 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Streamline the code for flagging warnings in the reports Aperta

good first issue help wanted

EducationalTestingService/rsmtool#539 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
New method for predicting from coefficients Aperta

enhancement

EducationalTestingService/rsmtool#545 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Add support for sections in rsmxval Aperta

EducationalTestingService/rsmtool#557 · 0 commenti · 0 reazioni · 1 assegnatario · Indicizzata il 15/9/2026
Log additional intermediate files to W&B Aperta

enhancement

EducationalTestingService/rsmtool#630 · 0 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026
Slim installation option or model inference export option Aperta

EducationalTestingService/rsmtool#689 · 5 commenti · 0 reazioni · 0 assegnatari · Indicizzata il 15/9/2026

EducationalTestingService/rsmtool

Ricevi le nuove issue nella tua casella