aboutcode-org / aboutcode-org/vulnerablecode
Run importers in Parallel
Aberta
- Linguagem predominante
- Python
- Estrelas
- 702
- Forks
- 328
- Merge médio
- 3d 8h
- PRs com merge (30d)
- 3
Descrição
Instead of running `./manage.py import --all` in sequence
We can use multiprocessing and try to use all CPU power.
suggestions:
- we can use Celery and schedule tasks and run easily importers in parallel
(another benefit: we can run periodic Tasks and make importers synchronize )
- we can make it simple and use some code from scancode.
this could be a solution for #833
Guia de contribuição
Nenhum guia de contribuição indexado para este repositório
Avaliação
Esta issue ainda não foi avaliada.