abetlen / abetlen/llama-cpp-python
Please add support or tell me if there are ANY wheels for llama.cpp that can run on debian/ubuntu
オープン
- 主要言語
- Python
- スター
- 10.6k
- フォーク
- 1.4k
- PR マージ指標
- PR 指標を取得中
説明
So I have been trying to use llama.cpp on huggingface and even withdocker file I cannot because I use both pytorch which requires debian and llama.cpp and I check EVERYWHERE (maybe) and I could not find a single prebuilt wheel for deian/ubuntu that actually works/ is not outdated
コントリビューションガイド
評価
この issue はまだ評価されていません。