apache / apache/parquet-java

Is it possible to apply specific encodings on specific columns with ParquetWriter?

Ouverte
#3,051 1 commentaire 0 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Java
Étoiles
3.1k
Forks
1.6k
Merge moyen
3 j 12 h
PR mergées (30 j)
33

Description

I’m working on a tool that generates Parquet files based on a file definition provided in JSON. I use the parquet-java library for this, and I’m curious if it’s possible to specify a particular type of encoding for specific columns when generating the file.

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Commencez par le point d’entrée ParquetWriter mentionné dans l’issue et examinez la façon dont les encodages de colonnes sont configurés. Comparez cela avec la définition de fichier basée sur JSON, puis déterminez s’il est possible de sélectionner des encodages différents pour chaque colonne ; le travail est terminé lorsqu’une réponse claire indique si cette possibilité est prise en charge ou non, et que la limitation ou la configuration pertinente est documentée.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
java
Domaine
data-engineering
Type d'issue
Fonctionnalité
Difficulté
5/5
Temps estimé
Plus d'une semaine
Activité
À l'abandon
Clarté
À clarifier
Accessibilité débutants
25/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.