使用spark2.4.0-cdh6.3.2版本去将数据查出来再写入2.1.1-cdh6.3.2,jar包冲突,可有好的解决方法
Đang mở
- Ngôn ngữ chính
- Java
- Star
- 6.4k
- Fork
- 1.2k
- Merge trung bình
- 1 ngày 23 giờ
- Pull request đã merge (30 ngày)
- 115
Mô tả
使用spark2.4.0-cdh6.3.2版本去将数据查出来再写入2.1.1-cdh6.3.2,jar包冲突,可有好的解决方法

Hướng dẫn đóng góp
Hướng nghiên cứu
Bắt đầu bằng việc xem xét hình ảnh đính kèm và tái hiện quy trình đọc và ghi dữ liệu bằng Spark 2.4.0-CDH6.3.2 và 2.1.1-CDH6.3.2. Ghi lại các JARs xung đột và ngữ cảnh runtime; issue hoàn tất khi quá trình truyền hoạt động mà không có xung đột dependency.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- java, spark
- Lĩnh vực
- data-engineering, databases
- Loại issue
- Lỗi
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Cần làm rõ
- Mức phù hợp với người mới
- 15/100