allenai / allenai/naacl2021-longdoc-tutorial

Rouge very low using provided example

オープン
#7 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
主要言語
Python
スター
343
フォーク
35
PR マージ指標
30日以内にマージされた PR はありません

説明

Hi, thanks for the demo script and nice tutorial. I tried to use the example code included in `summarization.py` as below. But I only get Rouge ~0.1 for testing data. Is there anything I didn't notice? Or I have to use all training data to get Rouge 43 as shown in the slide. Thanks!

```
PYTHONWARNINGS="ignore" CUDA_VISIBLE_DEVICES=6,7 python summarization.py \
--fp16 --batch_size 2 --grad_accum 1 --grad_ckpt \
--max_input_len 16384 --attention_window 1024
```

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。