apache / apache/parquet-java

Meta data is lost when writing avro union types to parquet

未关闭
#2,311 4 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
Component: Avro Component: Parquet Priority: Major Type: bug
主要语言
Java
星标
3.1k
派生
1.6k
平均合并
3 天 12 小时
30 天内合并 PR
33

描述

**Environment**: macOS -mojave
**Reporter**: [Michael O'Shea](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=mjhoshea) / @mjhoshea
**Assignee**: [Michael O'Shea](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=mjhoshea) / @mjhoshea
#### Original Issue Attachments:
- [image-2019-03-21-14-26-12-813.png](https://issues.apache.org/jira/secure/attachment/12963275/image-2019-03-21-14-26-12-813.png)

**Note**: *This issue was originally created as [PARQUET-1548](https://issues.apache.org/jira/browse/PARQUET-1548). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

贡献指南

这个仓库没有索引到贡献指南

调研方向

首先复现将 Avro union 类型写入 Parquet 时报告的元数据丢失问题,并将 issue 中 macOS Mojave 环境的详细信息作为上下文。跟踪写入路径,并为此行为确定一个现有的测试区域;当元数据在生成的 Parquet 输出中得到保留时,即视为完成。

由索引模型根据 Issue 内容生成。

评估

技术栈
java
领域
data-engineering
Issue 类型
缺陷
难度
4/5
预计耗时
3-5 天
活跃度
停滞
描述清晰度
需要澄清
新手友好度
25/100

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。