dask / dask/dask-expr

Explore passing workers into P2P merges

Offen
#596 1 Kommentar 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Python
Sterne
89
Forks
26
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

see #557

We should be able to do this more elegantly as soon as we materialise the graph on the scheduler to avoid dropping the results.

Beitragsleitfaden

Beitragsleitfaden öffnen

Rechercherichtung

Beginne mit Issue #557 und dem Scheduler-Code für P2P-Merges. Verfolge, wie Worker und Merge-Ergebnisse behandelt werden, bevor der Graph materialisiert wird, insbesondere dort, wo Ergebnisse verloren gehen können. Erledigt bedeutet, ein abgestimmtes Design festzulegen, das Worker an P2P-Merges übergibt, ohne Ergebnisse zu verlieren.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
python
Bereich
distributed-systems
Issue-Typ
Feature
Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.