AbsaOSS / AbsaOSS/enceladus

Further partitioning of Publish data based on other fields in the Dataset

Offen
#1,704 0 Kommentare 1 Reaktion 0 zugewiesene Personen Auf GitHub ansehen
Epic priority: undecided under discussion
Vorherrschende Sprache
Scala
Sterne
33
Forks
16
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

## Background
It might be useful to further partition the data after the conformance phase, based on the fields of the dataset. Done per user setup.

## Goal
Enable sub-partitoning of data at the end of the Conformance phase based on dataset configuration

## Expected Task List
A list of expected issues that will be needed to achieve this Epic
1. New optional set-up for dataset specifying the sub-partioning based on the dataset fields
2. The actual partitioning in _SparkJobs_
3. According UI changes to allow the set up.

Beitragsleitfaden

Beitragsleitfaden öffnen

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.