apache / apache/iceberg-python

Add option to pass storage config to polars lazy read

未关闭
#3,128 3 条评论 3 个 reaction 已指派 0 人 在 GitHub 查看
主要语言
Python
星标
1.1k
派生
581
平均合并
1 天 17 小时
30 天内合并 PR
78

描述

### Feature Request / Improvement

I was not able to use the `table.to_polars()` method because there is no option to include a storage_options param which is mentioned in the [polars docs](https://docs.pola.rs/api/python/dev/reference/api/polars.scan_iceberg.html).

贡献指南

这个仓库没有索引到贡献指南

调研方向

从 table.to_polars() 的实现开始,跟踪它如何调用 Polars 的惰性读取路径。查看 issue 中链接的 Polars scan_iceberg 文档,了解 storage_options 接口。完成的标准是:调用方可以通过 table.to_polars() 提供 storage_options,该选项能够传递到惰性读取操作,并且相关测试已更新或添加。

由索引模型根据 Issue 内容生成。

评估

技术栈
python
领域
data-engineering
Issue 类型
功能
难度
3/5
预计耗时
1-2 天
活跃度
冷清
描述清晰度
基本清楚
新手友好度
55/100

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。