confident-ai/deepeval
View on GitHubThe LLM Evaluation Framework
- Stars
- 18.3k
- Forks
- 1.9k
- Open beginner issues
- 0
- Indexed issues
- 289
- Avg merge
- 2d 6h
- Merged PRs (30d)
- 19
- Dominant language
- Python
- License
- Apache-2.0
- Last GitHub push
- Sep 14, 2026
- Latest indexed
- Sep 15, 2026
- Contributing guide
- Contributing guide
- Code of conduct
- No code of conduct
- Beginner labels
- help wanted
-
confident-ai/deepeval#238 · 3 comments · 0 reactions · 1 assignee ·
-
confident-ai/deepeval#245 · 5 comments · 0 reactions · 1 assignee ·
-
enhancement help wanted
confident-ai/deepeval#262 · 3 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#286 · 34 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#310 · 0 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#332 · 2 comments · 0 reactions · 1 assignee ·
-
Add metric for NER Open
confident-ai/deepeval#352 · 2 comments · 0 reactions · 0 assignees ·
-
help wanted
confident-ai/deepeval#382 · 2 comments · 0 reactions · 1 assignee ·
-
confident-ai/deepeval#441 · 6 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#482 · 9 comments · 0 reactions · 0 assignees ·
-
retrieval_context Open
confident-ai/deepeval#483 · 12 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#484 · 5 comments · 1 reaction · 0 assignees ·
-
confident-ai/deepeval#489 · 5 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#496 · 3 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#500 · 12 comments · 3 reactions · 0 assignees ·
-
enhancement help wanted
confident-ai/deepeval#508 · 11 comments · 0 reactions · 0 assignees ·
-
enhancement help wanted
confident-ai/deepeval#530 · 3 comments · 0 reactions · 1 assignee ·
-
confident-ai/deepeval#538 · 8 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#565 · 3 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#568 · 13 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#595 · 1 comment · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#597 · 9 comments · 0 reactions · 1 assignee ·
-
confident-ai/deepeval#605 · 1 comment · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#645 · 1 comment · 2 reactions · 0 assignees ·
-
confident-ai/deepeval#671 · 1 comment · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#702 · 9 comments · 1 reaction · 0 assignees ·
-
confident-ai/deepeval#730 · 1 comment · 0 reactions · 0 assignees ·
-
Show me the prompt! Open
confident-ai/deepeval#731 · 2 comments · 2 reactions · 0 assignees ·
-
confident-ai/deepeval#733 · 0 comments · 0 reactions · 0 assignees ·
-
Score is not cached Open
confident-ai/deepeval#734 · 0 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#739 · 4 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#743 · 16 comments · 1 reaction · 0 assignees ·
-
confident-ai/deepeval#757 · 12 comments · 1 reaction · 0 assignees ·
-
confident-ai/deepeval#767 · 7 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#768 · 0 comments · 5 reactions · 0 assignees ·
-
confident-ai/deepeval#769 · 2 comments · 11 reactions · 0 assignees ·
-
confident-ai/deepeval#775 · 1 comment · 1 reaction · 0 assignees ·
-
confident-ai/deepeval#790 · 0 comments · 8 reactions · 0 assignees ·
-
confident-ai/deepeval#792 · 0 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#793 · 1 comment · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#794 · 2 comments · 2 reactions · 0 assignees ·
-
confident-ai/deepeval#819 · 1 comment · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#821 · 3 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#829 · 7 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#836 · 0 comments · 3 reactions · 0 assignees ·
-
MMLU stopped working Open
confident-ai/deepeval#838 · 0 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#843 · 2 comments · 1 reaction · 0 assignees ·
-
AuthenticationError Open
confident-ai/deepeval#844 · 3 comments · 0 reactions · 0 assignees ·
-
confident-ai/deepeval#847 · 4 comments · 2 reactions · 0 assignees ·
-
confident-ai/deepeval#856 · 0 comments · 0 reactions · 0 assignees ·