JuliaParallel / JuliaParallel/DistributedNext.jl

Observability support

Offen
#64 11 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
enhancement
Vorherrschende Sprache
Julia
Sterne
27
Forks
1
Ø Merge
16 Min.
Gemergte PRs (30 T.)
1

Beschreibung

Things that we could do:
- Keep counters that track communication statistics between workers, like the number of RPC calls and the amount of data sent/received.
- Expose a hook API so packages can register functions that will be called on sending/receiving data. Not sure about the performance implications of this.
- Read-only API to check the status of a worker, the time of last contact, and state of worker-to-worker connections.

Use cases:
- Tracking network usage between workers on HPC clusters
- Better support for profiling tools like Extrae (https://github.com/JuliaParallel/DistributedNext.jl/issues/1#issuecomment-2437194907)

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

No files or tests are named. Start by tracing worker-to-worker communication in DistributedNext.jl and review the linked Extrae discussion; first narrow whether the contribution is counters, hooks, or a worker-status API. Done requires an agreed scope and observable communication or profiling data.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
julia
Bereich
distributed-systems, hpc, observability
Issue-Typ
Feature
Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Aktivitätsstatus
Ruhig
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
35/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.