Add new APIs for nested predicate pushdown
- Ngôn ngữ chính
- Java
- Star
- 3.1k
- Fork
- 1.6k
- Merge trung bình
- 3 ngày 12 giờ
- Pull request đã merge (30 ngày)
- 33
Mô tả
Currently, Parquet's **org.apache.parquet.filter2.predicate.FilterApi** is using **dot** to split the column name into multi-parts of nested fields. The drawback is that this causes issues when the field name contains **dot**.
The new APIs that will be added will take array of string directly for multi-parts of nested fields, so no confusion as using **dot** as a separator.
See https://github.com/apache/spark/pull/27728 and [SPARK-17636] for details.
**Reporter**: [DB Tsai](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=dbtsai)
**Note**: *This issue was originally created as [PARQUET-1809](https://issues.apache.org/jira/browse/PARQUET-1809). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Hướng nghiên cứu
Bắt đầu với org.apache.parquet.filter2.predicate.FilterApi và xem lại cách tên cột có dấu chấm hiện được tách cho các trường lồng nhau. Kiểm tra pull request Spark được liên kết và SPARK-17636 để xác định hình dạng API dự kiến. Được xem là hoàn tất khi các API dựa trên mảng hỗ trợ tên trường lồng nhau mà không coi các dấu chấm bên trong tên trường là dấu phân cách.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- java
- Lĩnh vực
- api, backend-api-design
- Loại issue
- Tính năng
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 42/100