apache / apache/parquet-java

Properly close buffers

Offen
#3,558 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Type: enhancement
Vorherrschende Sprache
Java
Sterne
3.1k
Forks
1.6k
Ø Merge
3 T. 12 Std.
Gemergte PRs (30 T.)
33

Beschreibung

### Describe the enhancement requested

As @pan3793 pointed out https://github.com/apache/parquet-java/pull/3360#issuecomment-3588399639, when updating to a later version of Hadoop, it starts failing with an error of lingering buffers.

### Component(s)

_No response_

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Lies zunächst die Diskussion in Apache Parquet PR 3360, insbesondere den dort referenzierten Kommentar, und reproduziere den Fehler mit verbleibenden Buffern nach der Aktualisierung von Hadoop. Ermittle den an diesem Fehler beteiligten Buffer-Lebenszyklus; abgeschlossen ist die Aufgabe, wenn die Buffer ordnungsgemäß geschlossen werden und die neuere Hadoop-Version keine verbleibenden Buffer mehr meldet.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
java
Bereich
data-engineering
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Ruhig
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
45/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.