4paradigm / 4paradigm/OpenMLDB
Get offline log of yarn-cluster jobs with Yarn API
Aperta
batch-engine
enhancement
- Lingua principale
- C++
- Stelle
- 1.7k
- Fork
- 331
- Merge medio
- 12g 12h
- PR unite (30g)
- 1
Descrizione
Now we can only get stdout and stderr of Spark jobs but there are no stdout log in yarn-cluster mode.
Guida per i contributori
Apri la guida per i contributori
Direzione di ricerca
The issue mentions missing stdout logs in yarn-cluster mode for Spark jobs. Look for Spark job submission and logging code, likely in the cluster management or job runner modules. Investigate how Yarn API can be used to retrieve offline logs. Check existing logging for stdout/stderr in other modes to understand the current implementation.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- spark
- Ambito
- backend, databases, machine-learning
- Tipo di issue
- Funzionalità
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 35/100