4paradigm / 4paradigm/OpenMLDB
Get offline log of yarn-cluster jobs with Yarn API
Đang mở
batch-engine
enhancement
- Ngôn ngữ chính
- C++
- Star
- 1.7k
- Fork
- 331
- Merge trung bình
- 12 ngày 12 giờ
- Pull request đã merge (30 ngày)
- 1
Mô tả
Now we can only get stdout and stderr of Spark jobs but there are no stdout log in yarn-cluster mode.
Hướng dẫn đóng góp
Hướng nghiên cứu
The issue mentions missing stdout logs in yarn-cluster mode for Spark jobs. Look for Spark job submission and logging code, likely in the cluster management or job runner modules. Investigate how Yarn API can be used to retrieve offline logs. Check existing logging for stdout/stderr in other modes to understand the current implementation.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- spark
- Lĩnh vực
- backend, databases, machine-learning
- Loại issue
- Tính năng
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 35/100