apache / apache/parquet-java

no projection in thrift union types.

オープン
#1,588 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る
Component: Java Component: Parquet Priority: Major Type: bug
主要言語
Java
スター
3.1k
フォーク
1.6k
平均マージ
3日 12時間
マージ済み PR(30日)
33

説明

We should not allow projecting a subset of the fields in a Thrift union as this will result in errors.
In a union there will be exactly one defined field.
Which means reading the data will fail if we project it out as Thrift expects exactly one (and not 0)

**Reporter**: [Julien Le Dem](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=julienledem) / @julienledem

**Note**: *This issue was originally created as [PARQUET-102](https://issues.apache.org/jira/browse/PARQUET-102). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

調査の方向性

Issue では影響を受けるエントリポイントとして Thrift union projection が挙げられていますが、ファイルやテストは示されていません。まず parquet-java における union フィールドの projection 処理を追跡してください。subset projection によってフィールド数が 0 の union が残る場合に、それが拒否または防止され、結果として発生する read failure がテストでカバーされれば完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
java
領域
data
issue の種類
バグ
難易度
4/5
見積もり時間
3〜5日
活発さ
停滞
明瞭さ
おおむね明確
初心者へのやさしさ
35/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。