abetlen / abetlen/llama-cpp-python

Please add support or tell me if there are ANY wheels for llama.cpp that can run on debian/ubuntu

Aperta
#2,113 3 commenti 0 reazioni 0 assegnatari Vedi su GitHub
Lingua principale
Python
Stelle
10.6k
Fork
1.4k
Metriche di merge delle PR
Metriche PR in attesa

Descrizione

So I have been trying to use llama.cpp on huggingface and even withdocker file I cannot because I use both pytorch which requires debian and llama.cpp and I check EVERYWHERE (maybe) and I could not find a single prebuilt wheel for deian/ubuntu that actually works/ is not outdated

Guida per i contributori

Apri la guida per i contributori

Valutazione

Questa issue non è ancora stata valutata.

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.