allenai / allenai/vampire

Add wordpiece tokenization tools

オープン
#52 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
enhancement
主要言語
Python
スター
174
フォーク
33
PR マージ指標
30日以内にマージされた PR はありません

説明

Add wordpiece tokenization tools to repository, to reduce overall vocabulary size and improve training speed.

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。