nodeSolidServer / nodeSolidServer/node-solid-server

Server limitations when querying multiple pods (>128) in parallel

Offen
#1,595 2 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

Vorherrschende Sprache
JavaScript
Sterne
1.8k
Forks
308
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

Hi,

I am running some experiments querying more than 128 pods in parallel from the Inrupt server and SolidCommunity. In both cases when I query data from more than 128 pods (i.e., 256, 512, 1024) at the same time the server stops the queries and blocks them.

When I experiment with 64 or fewer pods there is no problem. However, I have to do it in batches of 64 pods when I want to query more than 64 pods in parallel otherwise the server starts blocking my HTTP requests.

Is it expected that a SOLID server block parallel queries for a large number of pods from the same client?

Thank you

Crossposted: https://github.com/inrupt/pod-server/issues/76

Beitragsleitfaden

Beitragsleitfaden öffnen

Erste Schritte

  1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
  3. Forke das Repository und arbeite in einem Branch.
  4. Öffne einen Pull Request, der die Issue-Nummer nennt.

Rechercherichtung

In der Issue sind keine Quelldatei, kein Test und kein Einstiegspunkt angegeben. Beginne damit, parallele Abfragen gegen mehr als 128 Pods zu reproduzieren, und vergleiche sie anschließend mit Batches von 64 oder weniger. Ermittle dann, ob die Blockierung dem erwarteten Serververhalten entspricht. Als abgeschlossen gilt die Aufgabe, wenn das Nebenläufigkeitslimit und das erwartete Verhalten identifiziert und entweder dokumentiert oder behoben wurden.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
javascript
Bereich
backend
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.