allenai / allenai/bilm-tf

Which tokenizer used for Japanese pretrained model?

未关闭
#210 2 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
主要语言
Python
星标
1.6k
派生
447
PR 合并指标
30 天内没有已合并 PR

描述

Hi,
I have a question on your provided pretrained model for Japanese.
Which tokenizer was used to train the model? I found the model is provided by `ExaWizards Inc. Enkhbold Bataa, Joshua Wu.`

Thanks.

贡献指南

这个仓库没有索引到贡献指南

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。