apache / apache/parquet-java

[Vectorized Reader] Support Complex Types (Map, Array, Struct) in Parquet Vectorized Reader

Offen
#1,824 1 Kommentar 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Component: Java Component: Parquet Priority: Major Type: task
Vorherrschende Sprache
Java
Sterne
3.1k
Forks
1.6k
Ø Merge
3 T. 12 Std.
Gemergte PRs (30 T.)
33

Beschreibung

https://github.com/zhenxiao/incubator-parquet-mr/tree/vector
Has support for primitive types. Needs to support complex types as well

**Reporter**: [Zhenxiao Luo](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=zhenxiao) / @zhenxiao
**Assignee**: [Nezih Yigitbasi](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=nezihyigitbasi) / @nezihyigitbasi
#### PRs and other links:
- [PR-257](https://github.com/apache/parquet-mr/pull/257)

**Note**: *This issue was originally created as [PARQUET-298](https://issues.apache.org/jira/browse/PARQUET-298). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Beginne mit dem im Issue verlinkten vector branch und überprüfe die bestehende Unterstützung für primitive Typen. Prüfe PR-257 und die zugehörigen Änderungen am vektorisierten Parquet-Reader, bevor du den verbleibenden Arbeitsaufwand bestimmst. Erledigt bedeutet, dass die Typen Map, Array und Struct neben primitiven Typen unterstützt werden.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
java
Bereich
data-engineering
Issue-Typ
Feature
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
20/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.