Incorrect runtimes reported in emissions files
Dieses Issue hat noch niemand übernommen.
- Vorherrschende Sprache
- Python
- Sterne
- 1.9k
- Forks
- 323
- Ø Merge
- 1 T. 12 Std.
- Gemergte PRs (30 T.)
- 12
Beschreibung
- CodeCarbon version: 2.6.0
- Python version: 3.10
- Operating System: Linux (Google Colab)
Description
I was trying to record the emissions generated while fine-tuning the Gemma-7B model on an A100 GPU on Google Colab. While the code ran without any errors, the duration reported by the library in the emissions seems to be incorrect.
In two trials, the total duration is reported as 33.5 seconds and 33.2 seconds, respectively, while the actual durations were closer to 30 minutes. I also recorded the emissions subtask-wise, and the durations for individual subtasks are reported as negative (e.g., -1723972816).
Since I did not face this issue with other notebooks I ran on Google Colab with other models and GPUs, as well as other models on the same GPU, I was wondering where the error came from in this scenario? Thanks!
Beitragsleitfaden
Erste Schritte
- Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
- Forke das Repository und arbeite in einem Branch.
- Öffne einen Pull Request, der die Issue-Nummer nennt.
Rechercherichtung
Reproduziere den Bericht in Google Colab mit CodeCarbon 2.6.0, Gemma-7B-Fine-Tuning und einer A100-GPU und vergleiche die Gesamtdauer und die Dauer der Teilaufgaben mit der tatsächlichen Laufzeit. Beginne damit nachzuverfolgen, wie Laufzeitwerte für Emissionsdateien und Teilaufgaben aufgezeichnet werden. Als erledigt gilt die Aufgabe, wenn die Dauern nicht negativ sind und eng mit der beobachteten Ausführungszeit übereinstimmen.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- python
- Bereich
- backend
- Issue-Typ
- Bug
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 30/100