aboutcode-org / aboutcode-org/vulnerablecode

Run importers in Parallel

Aberta
#837 1 comentário 0 reações 0 responsáveis Ver no GitHub
Linguagem predominante
Python
Estrelas
702
Forks
328
Merge médio
3d 8h
PRs com merge (30d)
3

Descrição

Instead of running `./manage.py import --all` in sequence
We can use multiprocessing and try to use all CPU power.

suggestions:
- we can use Celery and schedule tasks and run easily importers in parallel
(another benefit: we can run periodic Tasks and make importers synchronize )

- we can make it simple and use some code from scancode.

this could be a solution for #833

Guia de contribuição

Nenhum guia de contribuição indexado para este repositório

Avaliação

Esta issue ainda não foi avaliada.

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.