bigscience-workshop / bigscience-workshop/evaluation
Add TyDiQA to Full Benchmark
Offen
multilingual
NLU
- Vorherrschende Sprache
- Python
- Sterne
- 42
- Forks
- 24
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Beschreibung
Dieses Issue hat keine Beschreibung.
Beitragsleitfaden
Rechercherichtung
Der Issue-Body ist leer, daher ist keine Datei, kein Test und kein Einstiegspunkt angegeben. Beginne damit herauszufinden, wie bestehende vollständige Benchmarks registriert werden, und ermittle die Anforderungen für die TyDiQA-Integration. Als erledigt gilt die Aufgabe, wenn TyDiQA im vollständigen Benchmark enthalten ist und die relevanten Evaluierungsprüfungen erfolgreich sind.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- python
- Bereich
- machine-learning
- Issue-Typ
- Feature
- Schwierigkeit
- 5/5
- Geschätzter Aufwand
- Über eine Woche
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 20/100