codefuse-ai / codefuse-ai/MFTCoder
mftcoder使用humaneval评估
オープン
- 主要言語
- Python
- スター
- 712
- フォーク
- 69
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
你好，想问下mftcoder怎么使用humaneval跑评分，我想先跑下codellama-7b-hf的humaneval评分，然后在它的基础上使用mftcoder微调之后再跑评分，但是不知道怎么写，新手求教程，谢谢
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
Issue では MFTCoder、HumanEval、CodeLlama-7B-HF が挙げられていますが、ファイルや評価のエントリーポイントは示されていません。まずリポジトリの HumanEval 評価ワークフローを特定し、次に baseline と MFTCoder-fine-tuned model をスコアリングするための再現可能な手順を、成功時の出力例を含めて文書化してください。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- python
- 領域
- machine-learning
- issue の種類
- ドキュメント
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 活発さ
- 停滞
- 明瞭さ
- 説明が足りない
- 初心者へのやさしさ
- 20/100