AbsaOSS / AbsaOSS/dataset-comparison
Data preporcessing
Ouverte
enhancement
low
- Langage dominant
- Scala
- Étoiles
- 2
- Forks
- 0
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Description
Add preprocessing to parquet files before comparing them
### Motivation
We can remove columns that are not necessary or unwanted for comparison.
### Tasks
- [ ] Create Preprocess class
- [ ] add method preprocess
- [ ] method will remove columns with specific names (timestamps, run id)
```
Guide de contribution
Ouvrir le guide de contribution
Évaluation
Cette issue n'a pas encore été évaluée.