AbsaOSS / AbsaOSS/enceladus

Update spark-job tests with Hermes

Offen
#2,168 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
feature priority: undecided tests under discussion
Vorherrschende Sprache
Scala
Sterne
33
Forks
16
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

## Background
Spark-jobs test - Hermes tooling are not up to date.

## Feature
Spark-job tests are up to date to current existing logic and rules.

## Proposed Solution
Solution Ideas:
1. Improve test data - remove duplicity (Aa >> ab, ac, …)
2. Update reference data to be compatible with Spark 3
3. Add missing rules
4. Add missing ignores to get tests passing
5. Add std & conf scenarios
6. Try to change usage of property "enceladus-job-jar" to use current version instead of defined one.

Beitragsleitfaden

Beitragsleitfaden öffnen

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.