BlueBrain / BlueBrain/BluePyMM

Investigate memory footprint

Offen
#153 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Python
Sterne
13
Forks
9
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

It seems BluePyMM can't run on nodes with 16 GB of RAM (for 16 slaves on same node, job with 80 cores in total, bbp viz cloud partition). Happens during the 'run' step.
This might be a problem at the master node, we probably could lower the memory footprint a bit by loading less data in memory.

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Beginne damit, den Fehler während des Schritts “run” mit 16 slaves auf einem 16-GB-Knoten und insgesamt 80 Kernen in der bbp viz cloud partition zu reproduzieren. Untersuche, ob der Speicher auf dem master node konzentriert ist, ermittle, welche Daten im Speicher gehalten werden, und miss den Speicherbedarf vor und nach der Reduzierung der geladenen Daten. Als abgeschlossen gilt die Aufgabe, wenn der Lauf innerhalb des verfügbaren Speichers abgeschlossen wird und die relevanten Messungen dokumentiert sind.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
python
Bereich
backend, performance
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.