51zero / 51zero/eel-sdk

a.parquet/_SUCCESS is not a Parquet file (too small length: 0)

Offen
#390 1 Kommentar 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Scala
Sterne
147
Forks
32
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

you don't filter a _SUCCESS file,can't read a parquet dir?

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Look for code that reads Parquet files from a directory, likely in a file reader or data source module. The issue is that a _SUCCESS marker file (size 0) is being incorrectly processed as a Parquet file. Identify the file filtering logic and add an exclusion for empty files or files named _SUCCESS. Check existing tests for Parquet directory reading to verify the fix.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
hadoop, scala
Bereich
data-engineering
Issue-Typ
Bug
Schwierigkeit
2/5
Geschätzter Aufwand
1-3 Stunden
Aktivitätsstatus
Veraltet
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
45/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.