AbsaOSS/spark-data-standardization

Auf GitHub ansehen

A library for Spark that helps to standardize any input data (DataFrame) to adhere to the provided schema.

Sterne: 7
Forks: 2
Offene Anfänger-Issues: 0
Indexierte Issues: 7
Ø Merge: 1 T. 18 Std.
Gemergte PRs (30 T.): 4

Vorherrschende Sprache: Scala
Lizenz: Apache-2.0
Letzter GitHub-Push: 09.9.2026
Zuletzt indexiert: 13.9.2026
Beitragsleitfaden: Kein Beitragsleitfaden
Verhaltenskodex: Kein Verhaltenskodex
Anfänger-Labels: Keine Anfänger-Labels indexiert

Offen Alle

Bisher 7 offene Issues indexiert

If Timestamp/Date pattern contains both literal or variable length entry and fractions of second placeholders it's likely to cause error Offen

AbsaOSS/spark-data-standardization#7 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Special submodules for different Spark versions Offen

AbsaOSS/spark-data-standardization#12 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Standardization can fail with `Task not serializable` when casting to date is requested Offen

bug

AbsaOSS/spark-data-standardization#57 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Incorporate `ErrorHandler` from Spark-commons. Offen

AbsaOSS/spark-data-standardization#60 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Validation of timestamp with ISO8601 pattern with microseconds fails Offen

bug

AbsaOSS/spark-data-standardization#68 · 1 Kommentar · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Add support for capitalized month names when casting dates Offen

enhancement

AbsaOSS/spark-data-standardization#83 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026
Standardization fails if default value is not defined for a non-nullable array Offen

bug

AbsaOSS/spark-data-standardization#86 · 0 Kommentare · 0 Reaktionen · 0 zugewiesene Personen · Indexiert am 13.9.2026

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.