AbsaOSS / AbsaOSS/dataset-comparison

Add switch to fail on duplicate rows

Ouverte
#4 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
enhancement low
Langage dominant
Scala
Étoiles
2
Forks
0
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

# Description

Some datasets are with duplicate rows, in some it is a major issues, mainly if they do the a (Composite) Primary Key defined. In those cases users would opt to fail fast if duplicates are found.

# Feature

Add a switch to input params to fail if input `A` or `B` has duplicate rows.

> Original author @Zejnilovic

Guide de contribution

Ouvrir le guide de contribution

Évaluation

Cette issue n'a pas encore été évaluée.

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.