apache / apache/iceberg-python

add_files support parquet files with field ids

未关闭
#3,556 1 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
主要语言
Python
星标
1.1k
派生
581
平均合并
1 天 17 小时
30 天内合并 PR
78

描述

### Feature Request / Improvement

I am using rust to commit to iceberg rest catalogue, however that requires field id's to be written for commit, however when I try to commit those same files using pyIceberg ( In case of re-initialisation ).
This error is shown
```
fb0b1e42-2c49-434c-b39a-da4586e7ef05-die_info.parquet because it has field IDs. `add_files` only supports addition of files without field_ids
```
If it is not assigned to someone I believe I can work on this.
Thanks!s

贡献指南

这个仓库没有索引到贡献指南

调研方向

首先定位 add_files 入口点,并了解它当前如何处理带有字段 ID 的 Parquet 文件。当 add_files 接受报告中描述的带有字段 ID 的文件,同时保留对不带字段 ID 的文件的现有支持时,工作就完成了。

由索引模型根据 Issue 内容生成。

评估

技术栈
python
领域
data-engineering
Issue 类型
功能
难度
3/5
预计耗时
1-2 天
活跃度
冷清
描述清晰度
基本清楚
新手友好度
54/100

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。