apache / apache/hugegraph-computer

[Feature] Implement parallel input process

Aperta
#247 0 commenti 2 reazioni 0 assegnatari Vedi su GitHub
feature
Lingua principale
Java
Stelle
65
Fork
52
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

### Feature Description (功能描述)

When we buffer write receiver's partition file to `vertexFile` and `edgeFile` maintained by `FileGraphPartition`. We can implement parallel write.

https://github.com/apache/incubator-hugegraph-computer/blob/f7d10a845de68cd84fe01f247b8fc3d887edbb67/computer-core/src/main/java/org/apache/hugegraph/computer/core/compute/ComputeManager.java#L75-L87

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Start at computer-core/src/main/java/org/apache/hugegraph/computer/core/compute/ComputeManager.java around lines 75-87, then inspect how FileGraphPartition maintains vertexFile and edgeFile. Determine how the buffered receiver partition file is currently written and define the parallel-write completion criteria. The issue does not mention tests or a specific validation command.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
java
Ambito
distributed-systems, performance
Tipo di issue
Funzionalità
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Abbastanza chiara
Idoneità per principianti
35/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.