bzip2 compression
- Lenguaje dominante
- Java
- Estrellas
- 3.1k
- Forks
- 1.6k
- Merge medio
- 3 d 12 h
- PR fusionados (30 d)
- 33
Descripción
Hi,
I have a requirement to implement Parquet with bzip2 compression because it's splitable. Right now, we can't provide bzip2 in PIG.
SET parquet.compression none/gzip/SNAPPY;
Is there any way to compress to bzip2 on top parquet ?
**Reporter**: [Rajasekhar Konda](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=rkonda)
**Note**: *This issue was originally created as [PARQUET-1011](https://issues.apache.org/jira/browse/PARQUET-1011). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Línea de trabajo
No files or tests are named. Start by tracing the existing parquet.compression setting and how PIG passes codec choices; then determine the integration needed for bzip2. Done means bzip2 is accepted alongside none, gzip, and SNAPPY and works for the requested PIG use case.
Escrito por el modelo de indexación a partir del texto del issue.
Evaluación
- Stack tecnológico
- java
- Área
- data-engineering
- Tipo de issue
- Nueva funcionalidad
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Estado de actividad
- Estancado
- Claridad
- Necesita aclaración
- Aptitud para principiantes
- 25/100