AlibabaResearch / AlibabaResearch/DAMO-ConvAI

About reproducing the results on level 3 evaluation on API-Bank

未关闭
#114 6 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
api-bank
主要语言
Python
星标
1.6k
派生
250
PR 合并指标
30 天内没有已合并 PR

描述

Hi,
Thanks for sharing the excellent benchmark of API-bank! @liminghao1630
While I am trying to run the https://github.com/AlibabaResearch/DAMO-ConvAI/blob/main/api-bank/lv3_evaluator.py, it seems the prediction json file is missing.
Could you please help share json prediction file for reference?
Moreover, it will be really nice if you can provide some end-to-end evaluation file like https://github.com/AlibabaResearch/DAMO-ConvAI/blob/main/api-bank/evaluator.py for evaluation.

Regards

贡献指南

这个仓库没有索引到贡献指南

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。