Why doesn't Parquet currently support writing multiple row groups simultaneously?

Hi Parquet developers,

I have a question regarding the current implementation of Parquet. As far as I understand, Parquet does not support writing multiple row groups simultaneously. Could you please explain the reasoning behind this design choice?

Additionally, I am considering modifying Parquet to allow for multiple row groups to exist in memory and be flushed sequentially. From a high-level perspective, does this approach seem feasible? Are there any potential pitfalls or challenges I should be aware of?

Thank you for your time and assistance.

Best regards,

No se ha indicado ningún archivo fuente, prueba ni punto de entrada. Empieza localizando el escritor de Parquet actual y la gestión de los grupos de filas, y luego sigue cómo se mantienen y vacían los grupos de filas; para darlo por terminado harían falta un diseño confirmado por un maintainer y respuestas documentadas sobre la viabilidad, el uso de memoria, el orden y otros posibles problemas.

Escrito por el modelo de indexación a partir del texto del issue.