Aiven-Open / Aiven-Open/cloud-storage-connectors-for-apache-kafka

Azure Blob Sink Connector Flush Behavior

Offen
#496 3 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Java
Sterne
58
Forks
39
Ø Merge
2 T. 10 Std.
Gemergte PRs (30 T.)
5

Beschreibung

Hi,

I was trying to change the flush behavior from time based to size based flushing, however, the sink connector doesn't seem to respect the _flush.size_ parameter in the configuration.

From my understanding the connector should rely on size based flushing with _flush.size_ set but somehow it always creates blobs after short and regular intervals which is resulting in so many small blob files.

Beitragsleitfaden

Beitragsleitfaden öffnen

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.