allenai / allenai/natural-instructions

Data leakage with tasks 1295 and 1640

Ouverte
#773 4 commentaires 1 réaction 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
1k
Forks
197
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

Task 1295 is a training task issued from the AdversarialQA dataset and Task 1640 is a testing task also issued from AdversarialQA.
I would assume that this wasn't caught by automated checks because the URLs are different and there is a typo in the `Source` field of task 1640 where the value is "adverserial_qa"

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Évaluation

Cette issue n'a pas encore été évaluée.

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.