allenai / allenai/longformer

Convert BERT to "long" version

Offen
#191 5 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Python
Sterne
2.2k
Forks
286
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

Hi.

Recently, I have needed to do a sequence classification task by SciBERT. Having read #95, I wrote code for conversion and run it successfully, but I'm not sure my code is right.

My code is here:
https://github.com/dawei-yu/convert-scibert-to-long/blob/main/conversion.ipynb

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.