allenai / allenai/nlpstack

Tokenizer fails on input

オープン
#127 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
主要言語
Scala
スター
43
フォーク
8
PR マージ指標
30日以内にマージされた PR はありません

説明

Kevin says:

> Turns out that line has a weird ^F character in it:
> Animals with webbed feet are better able to move through water .

This kills the tokenizer.

(But the ^F character might have gotten obliterated by copy and paste, so to report, put it back in manually.)

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。