Use airlift codecs for zstd
- 主要言語
- Java
- スター
- 3.1k
- フォーク
- 1.6k
- 平均マージ
- 3日 12時間
- マージ済み PR(30日)
- 33
説明
Just like Parquet-1643, which will add lz4, lz0, gzip with airlift implementation, it would be great to add airlift support for zstd.
I synced with Samarth Jain the author of Parquet-1643 for this effort. He is addressing the comments of the PR to get it merged. I have zstd with airlift implementation working on my end. I will create a PR for the zstd with airlift implementation after his PR is merged.
**Reporter**: [Xinli Shang](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=shangx@uber.com) / @shangxinli
**Assignee**: [Xinli Shang](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=shangx@uber.com) / @shangxinli
**Note**: *This issue was originally created as [PARQUET-1812](https://issues.apache.org/jira/browse/PARQUET-1812). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
まず、参照されている Parquet-1643 の作業とリンクされた PR commit を読みます。この issue は、その airlift codec 実装がマージされることを前提としているためです。issue に記載されているとおり、parquet-java に zstd の airlift サポートを追加し、対応する pull request を提出すれば完了です。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- java
- 領域
- data-engineering
- issue の種類
- 機能追加
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 活発さ
- 停滞
- 明瞭さ
- おおむね明確
- 初心者へのやさしさ
- 25/100