Is it possible to apply specific encodings on specific columns with ParquetWriter?
- Langage dominant
- Java
- Étoiles
- 3.1k
- Forks
- 1.6k
- Merge moyen
- 3 j 12 h
- PR mergées (30 j)
- 33
Description
I’m working on a tool that generates Parquet files based on a file definition provided in JSON. I use the parquet-java library for this, and I’m curious if it’s possible to specify a particular type of encoding for specific columns when generating the file.
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Commencez par le point d’entrée ParquetWriter mentionné dans l’issue et examinez la façon dont les encodages de colonnes sont configurés. Comparez cela avec la définition de fichier basée sur JSON, puis déterminez s’il est possible de sélectionner des encodages différents pour chaque colonne ; le travail est terminé lorsqu’une réponse claire indique si cette possibilité est prise en charge ou non, et que la limitation ou la configuration pertinente est documentée.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- java
- Domaine
- data-engineering
- Type d'issue
- Fonctionnalité
- Difficulté
- 5/5
- Temps estimé
- Plus d'une semaine
- Activité
- À l'abandon
- Clarté
- À clarifier
- Accessibilité débutants
- 25/100