如何在Prometheus里监控gpu的使用情况

包括每个pod的gpu使用率，显存。有相关指标的介绍吗？

Das Issue fragt nach der Bereitstellung von GPU-Metriken (Auslastung, Speicher) pro Pod in Prometheus für den k8s-vgpu-scheduler. Untersuche zunächst den vorhandenen Device-Plugin-Code, um zu sehen, welche Metriken bereits erfasst werden. Suche nach einer Integration des Prometheus-Clients oder nach Metrik-Endpunkten. Recherchiere, wie andere GPU-Device-Plugins (wie das von NVIDIA) Metriken bereitstellen. Ermittle, welche neuen Metriken definiert werden müssen und wie sie nach Pod gelabelt werden sollen. Prüfe, ob bereits Tests für Metriken vorhanden sind.

Vom Indexierungsmodell aus dem Issue-Text verfasst.