codefuse-ai / codefuse-ai/MFTCoder
mftcoder使用humaneval评估
Aperta
- Lingua principale
- Python
- Stelle
- 712
- Fork
- 69
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
你好，想问下mftcoder怎么使用humaneval跑评分，我想先跑下codellama-7b-hf的humaneval评分，然后在它的基础上使用mftcoder微调之后再跑评分，但是不知道怎么写，新手求教程，谢谢
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Direzione di ricerca
The issue names MFTCoder, HumanEval, and CodeLlama-7B-HF but no files or evaluation entry point. Start by locating the repository's HumanEval evaluation workflow, then document reproducible steps for scoring the baseline and the MFTCoder-fine-tuned model, including what successful output looks like.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- machine-learning
- Tipo di issue
- Documentazione
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 20/100