apache / apache/parquet-java

Provide pluggable APIs to support user customized compression codec

Đang mở
#2,463 1 bình luận 0 reaction 0 người được giao Xem trên GitHub
Component: Java Component: Parquet Priority: Minor Type: enhancement
Ngôn ngữ chính
Java
Star
3.1k
Fork
1.6k
Merge trung bình
3 ngày 12 giờ
Pull request đã merge (30 ngày)
33

Mô tả

_In demand of better performance, quite some end users want to leverage accelerators (e.g. FPGA, Intel QAT) to offload compression computation. Parquet, as a well adopted data format, should allow compression codec implementation customization via a pluggable mechanism for those standard compression codec. This JIRA is intended for introducing this set of APIs._

**Reporter**: [XinDong](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=XinDong) / @XinDongSh
#### PRs and other links:
- [Pull Request](https://github.com/apache/parquet-mr/pull/762)

**Note**: *This issue was originally created as [PARQUET-1804](https://issues.apache.org/jira/browse/PARQUET-1804). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Bắt đầu bằng việc xem xét Pull Request 762 và tài liệu migration được liên kết cho issue PARQUET-1804 trước đó. Sử dụng nội dung issue để xác định phạm vi của các pluggable APIs hỗ trợ các triển khai tùy chỉnh của những codec nén tiêu chuẩn; được xem là hoàn tất khi tập API được yêu cầu đã được giới thiệu và hỗ trợ các triển khai codec dựa trên accelerator.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Công nghệ
java
Lĩnh vực
backend-api-design
Loại issue
Tính năng
Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức độ hoạt động
Đình trệ
Độ rõ ràng
Cần làm rõ
Mức phù hợp với người mới
20/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.