AbsaOSS / AbsaOSS/spline-spark-agent

Is it possible to get count of records for data sources?

Offen
#401 3 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
feature
Vorherrschende Sprache
Scala
Sterne
210
Forks
102
Ø Merge
1 T. 1 Std.
Gemergte PRs (30 T.)
1

Beschreibung

## Background [Optional]
Similar to spark UI which shows count of records for each stage, would like to understand if counts can be available for spline lineage.

## Question
Hi, Is it possible to get count of records for data sources and before/after transformations like filter, join?

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.