allenai / allenai/scibert

JNLPBA Results

Ouverte
#94 2 commentaires 1 réaction 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
1.7k
Forks
232
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

Hey,

thanks for your awesome work!

In the paper you write that you use macro F1-scores. On JNLPBA, however, we typically see micro average being ~4pp lower than the macro average and in the logs in your GitHub repository (https://github.com/allenai/scibert/tree/master/results) SciBERT seems to achieve micro F1-scores in the range of 77%. Thus, I’m wondering whether the macro in your paper might be a typo?

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Évaluation

Cette issue n'a pas encore été évaluée.

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.