mlco2 / mlco2/codecarbon

Incorrect runtimes reported in emissions files

Abierto
#653 5 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

question
Lenguaje dominante
Python
Estrellas
1.9k
Forks
323
Merge medio
1 d 12 h
PR fusionados (30 d)
12

Descripción

  • CodeCarbon version: 2.6.0
  • Python version: 3.10
  • Operating System: Linux (Google Colab)
Description

I was trying to record the emissions generated while fine-tuning the Gemma-7B model on an A100 GPU on Google Colab. While the code ran without any errors, the duration reported by the library in the emissions seems to be incorrect.

In two trials, the total duration is reported as 33.5 seconds and 33.2 seconds, respectively, while the actual durations were closer to 30 minutes. I also recorded the emissions subtask-wise, and the durations for individual subtasks are reported as negative (e.g., -1723972816).

Since I did not face this issue with other notebooks I ran on Google Colab with other models and GPUs, as well as other models on the same GPU, I was wondering where the error came from in this scenario? Thanks!

Guía de contribución

Abrir la guía de contribución

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Línea de trabajo

Reproduce el informe en Google Colab con CodeCarbon 2.6.0, ajuste fino de Gemma-7B y una GPU A100, comparando las duraciones total y de las subtareas con el tiempo de ejecución real. Comienza rastreando cómo se registran los valores de tiempo de ejecución para los archivos de emisiones y las subtareas. Se considera terminado cuando las duraciones no son negativas y coinciden estrechamente con el tiempo de ejecución observado.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
python
Área
backend
Tipo de issue
Error
Dificultad
4/5
Tiempo estimado
3-5 días
Estado de actividad
Estancado
Claridad
Necesita aclaración
Aptitud para principiantes
30/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.