python / python/cpython

Excessive memory use or memory fragmentation when unpickling many small objects

Offen
#80,875 8 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

3.12 performance stdlib
Vorherrschende Sprache
Python
Sterne
77.2k
Forks
36k
PR-Merge-Kennzahlen
PR-Kennzahlen ausstehend

Beschreibung

BPO 36694
Nosy @pitrou, @avassalotti, @methane, @serhiy-storchaka, @Paul-E
PRs
  • python/cpython#13036
  • Files
  • load.py
  • common.py
  • dump.py
  • Note: these values reflect the state of the issue at the time it was migrated and might not reflect the current state.

    Show more details

    GitHub fields:

    assignee = None
    closed_at = None
    created_at = <Date 2019-04-21.17:11:20.009>
    labels = ['3.8', 'library', 'performance']
    title = 'Excessive memory use or memory fragmentation when unpickling many small objects'
    updated_at = <Date 2019-05-02.16:43:18.896>
    user = 'https://github.com/Paul-E'
    

    bugs.python.org fields:

    activity = <Date 2019-05-02.16:43:18.896>
    actor = 'serhiy.storchaka'
    assignee = 'none'
    closed = False
    closed_date = None
    closer = None
    components = ['Library (Lib)']
    creation = <Date 2019-04-21.17:11:20.009>
    creator = 'Ellenbogen'
    dependencies = []
    files = ['48279', '48280', '48282']
    hgrepos = []
    issue_num = 36694
    keywords = ['patch']
    message_count = 8.0
    messages = ['340615', '340616', '340617', '341179', '341181', '341193', '341251', '341284']
    nosy_count = 5.0
    nosy_names = ['pitrou', 'alexandre.vassalotti', 'methane', 'serhiy.storchaka', 'Ellenbogen']
    pr_nums = ['13036']
    priority = 'normal'
    resolution = None
    stage = 'patch review'
    status = 'open'
    superseder = None
    type = 'resource usage'
    url = 'https://bugs.python.org/issue36694'
    versions = ['Python 3.8']
    

    Beitragsleitfaden

    Beitragsleitfaden öffnen

    Erste Schritte

    1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
    2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
    3. Forke das Repository und arbeite in einem Branch.
    4. Öffne einen Pull Request, der die Issue-Nummer nennt.

    Rechercherichtung

    Beginne mit der Durchsicht des verknüpften PR #13036 und der angehängten Dateien load.py, common.py und dump.py. Reproduziere das gemeldete Speicherverhalten für viele kleine Objekte und vergleiche anschließend die Ergebnisse mit den vorgeschlagenen Änderungen. Erledigt ist die Aufgabe, wenn die übermäßige Speichernutzung oder Fragmentierung behoben ist und das relevante Performanceverhalten abgedeckt ist.

    Vom Indexierungsmodell aus dem Issue-Text verfasst.

    Bewertung

    Tech-Stack
    python
    Bereich
    performance
    Issue-Typ
    Bug
    Schwierigkeit
    4/5
    Geschätzter Aufwand
    3-5 Tage
    Aktivitätsstatus
    Veraltet
    Klarheit
    Größtenteils klar
    Anfängerfreundlichkeit
    25/100

    Neue Issues direkt in Ihr Postfach

    Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.