AbsaOSS / AbsaOSS/enceladus

Add an ability to run Conformance on a streaming source

未关闭
#1,014 2 条评论 0 个 reaction 已指派 1 人 已被 @yruslan 认领 在 GitHub 查看
Conformance feature priority: medium under discussion
主要语言
Scala
星标
33
派生
16
PR 合并指标
30 天内没有已合并 PR

描述

## Background
Add streaming support for Dynamic Conformance requires changes in the way we handle inputs, outputs and control measurements.

## Feature
Add initial support for running Conformance for a streaming source.
* Add command line parameters to identify that the job is streaming, specify the checkpoint location, etc.
* Change the way we load data to create dataframes.
* Change the way we save the output data.

贡献指南

打开贡献指南

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。