Excessive memory use or memory fragmentation when unpickling many small objects

Aberta
#80,875 8 comentários 0 reações 0 responsáveis Ver no GitHub

Ninguém assumiu esta issue ainda.

Avaliação

Dificuldade
4/5
Tempo estimado
3-5 dias
Facilidade para iniciantes
25/100
Tipo de issue
Bug
Clareza
Razoavelmente clara
Status de atividade
Estagnada
Stack de tecnologia
python
Domínio
performance

Direção de pesquisa

Comece revisando o PR #13036 vinculado e os arquivos anexados load.py, common.py e dump.py. Reproduza o comportamento de memória relatado para muitos objetos pequenos e, em seguida, compare os resultados com as alterações propostas. O trabalho estará concluído quando o uso excessivo de memória ou a fragmentação forem resolvidos e o comportamento de desempenho relevante estiver coberto.

Escrita pelo modelo de indexação a partir do texto da issue.

Descrição

3.12 performance stdlib
BPO 36694
Nosy @pitrou, @avassalotti, @methane, @serhiy-storchaka, @Paul-E
PRs
  • python/cpython#13036
  • Files
  • load.py
  • common.py
  • dump.py
  • Note: these values reflect the state of the issue at the time it was migrated and might not reflect the current state.

    Show more details

    GitHub fields:

    assignee = None
    closed_at = None
    created_at = <Date 2019-04-21.17:11:20.009>
    labels = ['3.8', 'library', 'performance']
    title = 'Excessive memory use or memory fragmentation when unpickling many small objects'
    updated_at = <Date 2019-05-02.16:43:18.896>
    user = 'https://github.com/Paul-E'
    

    bugs.python.org fields:

    activity = <Date 2019-05-02.16:43:18.896>
    actor = 'serhiy.storchaka'
    assignee = 'none'
    closed = False
    closed_date = None
    closer = None
    components = ['Library (Lib)']
    creation = <Date 2019-04-21.17:11:20.009>
    creator = 'Ellenbogen'
    dependencies = []
    files = ['48279', '48280', '48282']
    hgrepos = []
    issue_num = 36694
    keywords = ['patch']
    message_count = 8.0
    messages = ['340615', '340616', '340617', '341179', '341181', '341193', '341251', '341284']
    nosy_count = 5.0
    nosy_names = ['pitrou', 'alexandre.vassalotti', 'methane', 'serhiy.storchaka', 'Ellenbogen']
    pr_nums = ['13036']
    priority = 'normal'
    resolution = None
    stage = 'patch review'
    status = 'open'
    superseder = None
    type = 'resource usage'
    url = 'https://bugs.python.org/issue36694'
    versions = ['Python 3.8']
    

    Linguagem predominante
    Python
    Estrelas
    77.2k
    Forks
    36k
    Merge médio
    1d 9h
    PRs com merge (30d)
    558

    Guia de contribuição

    Abrir o guia de contribuição

    Primeiros passos

    1. Leia a issue inteira e depois o guia de contribuição do projeto.
    2. Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
    3. Faça um fork do repositório e trabalhe em uma branch.
    4. Abra um pull request que referencie o número da issue.

    Mais de python/cpython

    Todas as issues de python/cpython

    Issues semelhantes

    Mais issues de Python

    Receba novas issues na sua caixa de entrada

    Um resumo curto de issues do GitHub para quem está começando.