apache / apache/iceberg-python

Add option to pass storage config to polars lazy read

Abierto
#3,128 3 comentarios 3 reacciones 0 asignados Ver en GitHub
Lenguaje dominante
Python
Estrellas
1.1k
Forks
581
Merge medio
1 d 17 h
PR fusionados (30 d)
77

Descripción

### Feature Request / Improvement

I was not able to use the `table.to_polars()` method because there is no option to include a storage_options param which is mentioned in the [polars docs](https://docs.pola.rs/api/python/dev/reference/api/polars.scan_iceberg.html).

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Línea de trabajo

Comienza por la implementación de table.to_polars() y sigue cómo invoca la ruta de lectura diferida de Polars. Consulta la documentación de Polars sobre scan_iceberg enlazada en la issue para revisar la interfaz de storage_options. Se considera terminado cuando los llamadores pueden proporcionar storage_options mediante table.to_polars(), la opción llega a la operación de lectura diferida y las pruebas relevantes se han actualizado o añadido.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
python
Área
data-engineering
Tipo de issue
Nueva funcionalidad
Dificultad
3/5
Tiempo estimado
1-2 días
Estado de actividad
Tranquilo
Claridad
Bastante claro
Aptitud para principiantes
55/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.