longformer infer speed?
未关闭
- 主要语言
- Python
- 星标
- 2.2k
- 派生
- 286
- PR 合并指标
- 30 天内没有已合并 PR
描述
with model.half() can only got 10qbs per 2080ti with sequence length 1024 (12 layers)
did I miss something?
I try to infer with onnxruntime, but got an ScatterND error while session run
贡献指南
这个仓库没有索引到贡献指南
评估
这个 Issue 还没有评估数据。