apache / apache/parquet-java

Is it possible to apply specific encodings on specific columns with ParquetWriter?

Đang mở
#3,051 1 bình luận 0 reaction 0 người được giao Xem trên GitHub
Ngôn ngữ chính
Java
Star
3.1k
Fork
1.6k
Merge trung bình
3 ngày 12 giờ
Pull request đã merge (30 ngày)
33

Mô tả

I’m working on a tool that generates Parquet files based on a file definition provided in JSON. I use the parquet-java library for this, and I’m curious if it’s possible to specify a particular type of encoding for specific columns when generating the file.

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Bắt đầu với entry point ParquetWriter được đề cập trong issue và kiểm tra cách cấu hình encoding cho các cột. So sánh điều này với định nghĩa tệp dựa trên JSON, sau đó xác định xem có thể chọn các encoding khác nhau cho từng cột hay không; được coi là hoàn thành khi có câu trả lời rõ ràng về việc tính năng này có được hỗ trợ hay không và giới hạn hoặc cấu hình liên quan được ghi lại.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Công nghệ
java
Lĩnh vực
data-engineering
Loại issue
Tính năng
Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức độ hoạt động
Đình trệ
Độ rõ ràng
Cần làm rõ
Mức phù hợp với người mới
25/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.