InternLM / InternLM/Tutorial

请问lmdeploy如何在多卡部署

オープン
#555 コメント 1 件 リアクション 0 件 担当者 0 名 GitHub で見る
主要言語
Python
スター
2k
フォーク
1.5k
PR マージ指標
30日以内にマージされた PR はありません

説明

输入命令lmdeploy serve api_server后,默认是在单卡(0号卡)上部署,请问怎么实现在多卡上部署?

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

評価

この issue はまだ評価されていません。

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。