indygreg / indygreg/python-zstandard
Provide a file-like object to interface with TarFile
Nessuno ha ancora preso questa issue.
- Lingua principale
- C
- Stelle
- 642
- Fork
- 116
- Merge medio
- 1g 14h
- PR unite (30g)
- 5
Descrizione
I've got a dataset of about 50.000 files. For easier and faster processing, these are inside one tar-archive and compressed with Zstandard. With a file-like object performing decompression, this would be really simple:
with zstd.open('data.tar.zstd', mode='r') as tar:
with tarfile.open(fileobj=tar, mode='r') as archive:
// do something with archive...
Guida per i contributori
Apri la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Il workflow richiesto è mostrato tramite zstd.open e tarfile.open(fileobj=tar, mode='r'); iniziate leggendo gli entry point Python esistenti per la decompressione e le interfacce degli stream. Il lavoro è completo quando un oggetto decompresso può essere passato a tarfile.open per il workflow dimostrato di elaborazione degli archivi, con il comportamento simile a un file coperto dai test.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- tooling
- Tipo di issue
- Funzionalità
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 38/100