apache / apache/parquet-java

Only call hsync() and hflush() on supported filesystems

Offen
#2,990 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Type: enhancement
Vorherrschende Sprache
Java
Sterne
3.1k
Forks
1.6k
Ø Merge
3 T. 12 Std.
Gemergte PRs (30 T.)
33

Beschreibung

### Describe the enhancement requested

Instead of log the unsupported call check capabilities and call only on supported filesystems - e.g. S3A does not.

Write in a ParquetFile on S3 calls on hsync() or hflush() are logged: Application invoked the Syncable API against stream writing

### Comments

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Beginne damit, den ParquetFile-Schreibpfad nachzuverfolgen, in dem hsync() und hflush() aufgerufen werden, und untersuche, wie die Fähigkeiten des Dateisystems offengelegt werden. Als erledigt gilt die Aufgabe, wenn nicht unterstützte Dateisysteme wie S3A keine Syncable-Warnungen mehr protokollieren, während unterstützte Dateisysteme weiterhin die Aufrufe erhalten.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
aws, java
Bereich
backend, cloud
Issue-Typ
Feature
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
35/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.