An overwrite option for all sink types that write to HDFS
Abierto
enhancement
- Lenguaje dominante
- Scala
- Estrellas
- 147
- Forks
- 32
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Descripción
An overwrite option for all sink types that write to HDFS
**Proposal**
Sink.withOverwrite
**AffectedSinks**
- Parquet
- AvroParquet
- Avro
- Orc
- Csv
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Línea de trabajo
Look for sink implementations (Parquet, AvroParquet, Avro, Orc, Csv) in the codebase, likely under a 'sink' or 'io' package. Understand how they currently write to HDFS and where configuration options are handled. The goal is to add a 'withOverwrite' method that sets a flag to overwrite existing output files. Check existing tests for sinks to see how to add a test for the new option.
Escrito por el modelo de indexación a partir del texto del issue.
Evaluación
- Stack tecnológico
- hadoop, scala
- Área
- backend, data-engineering
- Tipo de issue
- Nueva funcionalidad
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Estado de actividad
- Estancado
- Claridad
- Bastante claro
- Aptitud para principiantes
- 45/100