apache / apache/iceberg-python

Add option to pass storage config to polars lazy read

Ouverte
#3,128 3 commentaires 3 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
1.1k
Forks
581
Merge moyen
1 j 17 h
PR mergées (30 j)
77

Description

### Feature Request / Improvement

I was not able to use the `table.to_polars()` method because there is no option to include a storage_options param which is mentioned in the [polars docs](https://docs.pola.rs/api/python/dev/reference/api/polars.scan_iceberg.html).

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Commencez par l’implémentation de table.to_polars() et suivez la manière dont elle invoque le chemin de lecture différée de Polars. Consultez la documentation de Polars sur scan_iceberg liée dans l’issue pour vérifier l’interface storage_options. Le travail est considéré comme terminé lorsque les appelants peuvent fournir storage_options via table.to_polars(), que l’option atteint l’opération de lecture différée et que les tests pertinents ont été mis à jour ou ajoutés.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
data-engineering
Type d'issue
Fonctionnalité
Difficulté
3/5
Temps estimé
1-2 jours
Activité
Calme
Clarté
Plutôt claire
Accessibilité débutants
55/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.