AbsaOSS / AbsaOSS/dataset-comparison

Data preporcessing

Aberta
#10 0 comentários 0 reações 0 responsáveis Ver no GitHub
enhancement low
Linguagem predominante
Scala
Estrelas
2
Forks
0
Métricas de merge de PRs
Nenhum PR com merge em 30d

Descrição

Add preprocessing to parquet files before comparing them

### Motivation
We can remove columns that are not necessary or unwanted for comparison.

### Tasks
- [ ] Create Preprocess class
- [ ] add method preprocess
- [ ] method will remove columns with specific names (timestamps, run id)
```

Guia de contribuição

Abrir o guia de contribuição

Avaliação

Esta issue ainda não foi avaliada.

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.