4paradigm / 4paradigm/OpenMLDB
Get offline log of yarn-cluster jobs with Yarn API
オープン
batch-engine
enhancement
- 主要言語
- C++
- スター
- 1.7k
- フォーク
- 331
- 平均マージ
- 12日 12時間
- マージ済み PR(30日)
- 1
説明
Now we can only get stdout and stderr of Spark jobs but there are no stdout log in yarn-cluster mode.
コントリビューションガイド
調査の方向性
The issue mentions missing stdout logs in yarn-cluster mode for Spark jobs. Look for Spark job submission and logging code, likely in the cluster management or job runner modules. Investigate how Yarn API can be used to retrieve offline logs. Check existing logging for stdout/stderr in other modes to understand the current implementation.
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- spark
- 領域
- backend, databases, machine-learning
- issue の種類
- 機能追加
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 活発さ
- 停滞
- 明瞭さ
- おおむね明確
- 初心者へのやさしさ
- 35/100