Missing field id support in parquet metadata
- Ngôn ngữ chính
- Java
- Star
- 3.1k
- Fork
- 1.6k
- Merge trung bình
- 3 ngày 12 giờ
- Pull request đã merge (30 ngày)
- 33
Mô tả
Field id is essential for some serialization framework such as protobuf, and they are used to keep schema forward/backward compatibility which could not be achieved by using field names. Currently field id is not persisted as file metadata.
**Reporter**: [Qinghui Xu](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=q.xu) / @qinghui-xu
#### PRs and other links:
- [GitHub Pull Request #410](https://github.com/apache/parquet-mr/pull/410)
**Note**: *This issue was originally created as [PARQUET-951](https://issues.apache.org/jira/browse/PARQUET-951). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Hướng nghiên cứu
Bắt đầu bằng việc xem xét Pull Request #410 và tài liệu di chuyển được liên kết, sau đó kiểm tra cách metadata của tệp Parquet hiện biểu diễn các trường schema. Xác nhận liệu các định danh trường đã được xử lý ở nơi khác hay chưa, và sử dụng các yêu cầu tương thích trong issue để xác định thế nào là hoàn tất; PR hiện có cho thấy công việc này có thể đã được triển khai thêm.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- java
- Lĩnh vực
- data-engineering
- Loại issue
- Tính năng
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 25/100