Training time of MAISI VAE
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 20/100
- Tipo de issue
- Error
- Claridad
- Necesita aclaración
- Estado de actividad
- Estancado
- Stack tecnológico
- pytorch
- Área
- machine-learning
Línea de trabajo
Comience con el punto de entrada del entrenamiento de MAISI VAE y su configuración de DDP, y luego reproduzca la época reportada de 20 horas en 30k exploraciones de CT utilizando dos GPU A100. No se identifica ningún archivo ni prueba; darlo por terminado requeriría establecer si el tiempo y el escalado son los esperados y documentar un enfoque de aceleración compatible.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Hi, I am trying to train the MAISI VAE from scratch using my dataset.
I wonder how long it takes to train on such a large dataset?
When I use 30k CT scans, it takes nearly 20 hours for 1 epoch on two A100. Is it correct? I use DDP, but I found it was even slower when I increased the GPU number.
If so, is there any method to accelerate the training process?
- Lenguaje dominante
- Jupyter Notebook
- Estrellas
- 2.5k
- Forks
- 803
- Merge medio
- 6 d 22 h
- PR fusionados (30 d)
- 3
Guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de Project-MONAI/tutorials
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100
Project-MONAI/tutorials#2076 ·
-
Dificultad 1/5 1-3 horas Aptitud para principiantes 76/100
Project-MONAI/tutorials#2069 ·
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 85/100
Project-MONAI/tutorials#1704 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 62/100
Project-MONAI/tutorials#2071 ·
-
Dificultad 3/5 1-2 días Aptitud para principiantes 35/100
Project-MONAI/tutorials#2067 ·
Todos los issues de Project-MONAI/tutorials
Issues similares
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
bancolombia/sentinel#21 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 85/100
infer-actively/pymdp#454 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
huggingface/sentence-transformers#4055 · 1 comentario ·
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 94/100
UKGovernmentBEIS/inspect_evals#2486 · 1 comentario ·