AbsaOSS / AbsaOSS/dataset-comparison
Data preporcessing
Aperta
enhancement
low
- Lingua principale
- Scala
- Stelle
- 2
- Fork
- 0
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
Add preprocessing to parquet files before comparing them
### Motivation
We can remove columns that are not necessary or unwanted for comparison.
### Tasks
- [ ] Create Preprocess class
- [ ] add method preprocess
- [ ] method will remove columns with specific names (timestamps, run id)
```
Guida per i contributori
Apri la guida per i contributori
Valutazione
Questa issue non è ancora stata valutata.