Use airlift codecs for zstd
- Lenguaje dominante
- Java
- Estrellas
- 3.1k
- Forks
- 1.6k
- Merge medio
- 3 d 12 h
- PR fusionados (30 d)
- 33
Descripción
Just like Parquet-1643, which will add lz4, lz0, gzip with airlift implementation, it would be great to add airlift support for zstd.
I synced with Samarth Jain the author of Parquet-1643 for this effort. He is addressing the comments of the PR to get it merged. I have zstd with airlift implementation working on my end. I will create a PR for the zstd with airlift implementation after his PR is merged.
**Reporter**: [Xinli Shang](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=shangx@uber.com) / @shangxinli
**Assignee**: [Xinli Shang](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=shangx@uber.com) / @shangxinli
**Note**: *This issue was originally created as [PARQUET-1812](https://issues.apache.org/jira/browse/PARQUET-1812). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Línea de trabajo
Empieza leyendo el trabajo de Parquet-1643 al que se hace referencia y el commit del PR enlazado, ya que este issue depende de que se fusione esa implementación del airlift codec. La tarea estará completada cuando se añada compatibilidad de airlift para zstd en parquet-java y se proporcione el pull request correspondiente, tal como se describe en el issue.
Escrito por el modelo de indexación a partir del texto del issue.
Evaluación
- Stack tecnológico
- java
- Área
- data-engineering
- Tipo de issue
- Nueva funcionalidad
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Estado de actividad
- Estancado
- Claridad
- Bastante claro
- Aptitud para principiantes
- 25/100