Parquet check-stats command only supports checking BINARY type columns.
- Langage dominant
- Java
- Étoiles
- 3.1k
- Forks
- 1.6k
- Merge moyen
- 3 j 12 h
- PR mergées (30 j)
- 33
Description
Hi, community, could you tell me why parquet check-stats command only supports checking BINARY type columns?
https://github.com/apache/parquet-java/blob/5ac50884e9ee27a1ce3ee18cc5ed4422147e5387/parquet-cli/src/main/java/org/apache/parquet/cli/commands/CheckParquet251Command.java#L104
Could we add some optional parameters so that it can detect all types of columns? I just want to use this tool to know whether there is any data corruption in the parquet file(not just for BINARY type columns).
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Commencez par lire parquet-cli/src/main/java/org/apache/parquet/cli/commands/CheckParquet251Command.java vers la ligne 104 afin de comprendre la vérification actuelle limitée à BINARY. Déterminez comment les paramètres facultatifs doivent sélectionner les types de colonnes, puis vérifiez que la commande peut détecter la corruption aussi bien dans les colonnes autres que BINARY que dans les colonnes BINARY.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- java
- Domaine
- cli
- Type d'issue
- Fonctionnalité
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Activité
- À l'abandon
- Clarté
- Plutôt claire
- Accessibilité débutants
- 35/100