apache / apache/parquet-java

Parquet check-stats command only supports checking BINARY type columns.

Abierto
#1,382 0 comentarios 0 reacciones 0 asignados Ver en GitHub
Lenguaje dominante
Java
Estrellas
3.1k
Forks
1.6k
Merge medio
3 d 12 h
PR fusionados (30 d)
33

Descripción

Hi, community, could you tell me why parquet check-stats command only supports checking BINARY type columns?

https://github.com/apache/parquet-java/blob/5ac50884e9ee27a1ce3ee18cc5ed4422147e5387/parquet-cli/src/main/java/org/apache/parquet/cli/commands/CheckParquet251Command.java#L104

Could we add some optional parameters so that it can detect all types of columns? I just want to use this tool to know whether there is any data corruption in the parquet file(not just for BINARY type columns).

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Línea de trabajo

Empieza leyendo parquet-cli/src/main/java/org/apache/parquet/cli/commands/CheckParquet251Command.java alrededor de la línea 104 para entender la comprobación actual que solo admite BINARY. Determina cómo deben seleccionar los parámetros opcionales los tipos de columna y verifica después que el comando también pueda detectar corrupción en columnas que no sean BINARY, además de en columnas BINARY.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
java
Área
cli
Tipo de issue
Nueva funcionalidad
Dificultad
4/5
Tiempo estimado
3-5 días
Estado de actividad
Estancado
Claridad
Bastante claro
Aptitud para principiantes
35/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.