51zero / 51zero/eel-sdk

a.parquet/_SUCCESS is not a Parquet file (too small length: 0)

Aperta
#390 1 commento 0 reazioni 0 assegnatari Vedi su GitHub
Lingua principale
Scala
Stelle
147
Fork
32
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

you don't filter a _SUCCESS file,can't read a parquet dir?

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Look for code that reads Parquet files from a directory, likely in a file reader or data source module. The issue is that a _SUCCESS marker file (size 0) is being incorrectly processed as a Parquet file. Identify the file filtering logic and add an exclusion for empty files or files named _SUCCESS. Check existing tests for Parquet directory reading to verify the fix.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
hadoop, scala
Ambito
data-engineering
Tipo di issue
Bug
Difficoltà
2/5
Tempo stimato
1-3 ore
Stato di attività
Ferma
Chiarezza
Abbastanza chiara
Idoneità per principianti
45/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.