apache / apache/iceberg-python

add_files support parquet files with field ids

オープン
#3,556 コメント 1 件 リアクション 0 件 担当者 0 名 GitHub で見る
主要言語
Python
スター
1.1k
フォーク
581
平均マージ
1日 17時間
マージ済み PR(30日)
77

説明

### Feature Request / Improvement

I am using rust to commit to iceberg rest catalogue, however that requires field id's to be written for commit, however when I try to commit those same files using pyIceberg ( In case of re-initialisation ).
This error is shown
```
fb0b1e42-2c49-434c-b39a-da4586e7ef05-die_info.parquet because it has field IDs. `add_files` only supports addition of files without field_ids
```
If it is not assigned to someone I believe I can work on this.
Thanks!s

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

調査の方向性

まず、add_files のエントリポイントを特定し、現在、field ID を持つ Parquet ファイルをどのように処理しているかを確認します。add_files がレポートに記載された field ID を持つファイルを受け入れ、field ID を持たないファイルに対する既存のサポートも維持できれば、作業は完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
python
領域
data-engineering
issue の種類
機能追加
難易度
3/5
見積もり時間
1〜2日
活発さ
静か
明瞭さ
おおむね明確
初心者へのやさしさ
54/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。