apache / apache/parquet-java

Meta data is lost when writing avro union types to parquet

Offen
#2,311 4 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Component: Avro Component: Parquet Priority: Major Type: bug
Vorherrschende Sprache
Java
Sterne
3.1k
Forks
1.6k
Ø Merge
3 T. 12 Std.
Gemergte PRs (30 T.)
33

Beschreibung

**Environment**: macOS -mojave
**Reporter**: [Michael O'Shea](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=mjhoshea) / @mjhoshea
**Assignee**: [Michael O'Shea](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=mjhoshea) / @mjhoshea
#### Original Issue Attachments:
- [image-2019-03-21-14-26-12-813.png](https://issues.apache.org/jira/secure/attachment/12963275/image-2019-03-21-14-26-12-813.png)

**Note**: *This issue was originally created as [PARQUET-1548](https://issues.apache.org/jira/browse/PARQUET-1548). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Beginne damit, den gemeldeten Verlust von Metadaten beim Schreiben von Avro-Union-Typen in Parquet zu reproduzieren, und verwende die Umgebungsdetails des Issues zu macOS Mojave als Kontext. Verfolge den Schreibpfad und identifiziere einen vorhandenen Testbereich für dieses Verhalten; als erledigt gilt die Aufgabe, wenn die Metadaten in der resultierenden Parquet-Ausgabe erhalten bleiben.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
java
Bereich
data-engineering
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.