AbsaOSS / AbsaOSS/enceladus

Add null_value metadata to fields

Ouverte
#1,521 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
feature priority: undecided Standardization under discussion
Langage dominant
Scala
Étoiles
33
Forks
16
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

## Background
Sometimes `null` is represented in a column in a way that cannot be covered by `--null-value` command-line option, either because globally cause mess in data (e.g. "0' used as undefined date) or not available in the _format_.

## Feature
Make a column metadata entry `null_value` a string that in src/raw represent `null` for standardization.

## Example
metatada `null_value` = _NOTHING_
| Raw |
| --- |
| Hello |
| Nothing |
| NOTHING |
| World |

| Standardized |
| --- |
| Hello |
| Nothing |
| `NULL` |
| World |

Guide de contribution

Ouvrir le guide de contribution

Évaluation

Cette issue n'a pas encore été évaluée.

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.