abetlen / abetlen/llama-cpp-python

Assertion Error while Loading a Phi2 GGUF Model via llama-cpp-python

Aberta
#1,076 4 comentários 1 reação 0 responsáveis Ver no GitHub
bug
Linguagem predominante
Python
Estrelas
10.6k
Forks
1.4k
Métricas de merge de PRs
Métricas de PR pendentes

Descrição

I am Trying to Load Phi2 GGUF Model via `llama-cpp-python` dependency
The Model I am trying to load is this:
https://huggingface.co/TheBloke/phi-2-GGUF

I am Getting this Error while I am trying to Load the Model:
Screenshot 2024-01-10 at 2 23 26 PM

Guia de contribuição

Abrir o guia de contribuição

Avaliação

Esta issue ainda não foi avaliada.

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.