Out of the box support for LocalOutputFile with ParquetWriter?
- Ngôn ngữ chính
- Java
- Star
- 3.1k
- Fork
- 1.6k
- Merge trung bình
- 3 ngày 12 giờ
- Pull request đã merge (30 ngày)
- 33
Mô tả
Hi,
It seems that even though it is possible to use ParquetReader with LocalInputFile out of the box, it is not possible to use ParquetWriter with LocalOutputFile.
This forces people to implement their own Builder (as it is abstract) and thus requires to add hadoop dependencies in the classpath.
It would be great if it was possible to do so, cheers!
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Hướng nghiên cứu
Bắt đầu bằng cách so sánh cách ParquetReader hỗ trợ LocalInputFile với đường dẫn builder của ParquetWriter được mô tả trong issue. Công việc hoàn tất khi ParquetWriter có thể sử dụng LocalOutputFile ngay lập tức mà không cần Builder tùy chỉnh hoặc thêm các dependency của Hadoop; không có tệp hay test cụ thể nào được nêu.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- java
- Lĩnh vực
- data
- Loại issue
- Tính năng
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 35/100