allenai / allenai/open-instruct
Add a think token
Offen
- Vorherrschende Sprache
- Python
- Sterne
- 3.9k
- Forks
- 585
- Ø Merge
- 5 T. 17 Std.
- Gemergte PRs (30 T.)
- 16
Beschreibung
Yashas mentioned that think token is not a single token in Olmo tokenizer.
https://github.com/orgs/allenai/projects/292/views/1?pane=issue&itemId=236941336&issue=allenai%7Coe-planning%7C6
Beitragsleitfaden
Bewertung
Dieses Issue wurde noch nicht bewertet.