AbsaOSS/spark-partition-sizing

Ver en GitHub

Sizing partitions in Spark

Estrellas: 9
Forks: 2
Issues abiertos para principiantes: 0
Issues indexados: 5

Lenguaje dominante: Scala
Licencia: Apache-2.0
Último push a GitHub: 23/3/2026
Última indexación: 13/9/2026
Guía de contribución: Sin guía de contribución
Código de conducta: Sin código de conducta
Etiquetas para principiantes: Sin etiquetas para principiantes indexadas
Métricas de merge de PR: Sin PR fusionados en 30 d

Abierto Todos

5 issues abiertos indexados

Implement `RecordSizer.fromDirectorySize` method Abierto

AbsaOSS/spark-partition-sizing#6 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 13/9/2026
Make `DataTypeSizes` easy to read from the application conifguration Abierto

enhancement

AbsaOSS/spark-partition-sizing#12 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 13/9/2026
Add skew suppression in `DataFramePartitioner` Abierto

enhancement

AbsaOSS/spark-partition-sizing#13 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 13/9/2026
In `DataFramePartitioner.DataFrameFunctions.repartitionByRecordCount` use max instead of average to decide about partitoing Abierto

enhancement

AbsaOSS/spark-partition-sizing#14 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 13/9/2026
`type ByteSize = Long` might not be correct or at least convenient Abierto

bug

AbsaOSS/spark-partition-sizing#15 · 0 comentarios · 0 reacciones · 0 asignados · Indexado el 13/9/2026

Un resumen breve de issues de GitHub para principiantes.