awslabs / awslabs/aws-lambda-redshift-loader
Batches Remain Open
- Lingua principale
- JavaScript
- Stelle
- 595
- Fork
- 161
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
Hello,
I'm not able to trigger open batches to run using the included generate-trigger-file.py script. The trigger file is being dropped into the correct S3 location, but the batch remains in an open status. The batch I'm looking at has the following configuration params:
batchSize = 16
batchSizeBytes = 100,000,000
batchTimeoutSecs = 500.
filenameFilterRegex = *.csv
Currently, the batch has 5 files and has a size of 7184598.
I apologize if this is a duplicate issue, but I couldn't find the solution.
Thanks!
Guida per i contributori
Apri la guida per i contributori
Direzione di ricerca
Inizia con generate-trigger-file.py e segui il percorso del trigger S3 fino al loader; confronta le impostazioni del batch riportate e il batch di cinque file e 7,184,598 byte con le condizioni che chiudono un batch. Riproduci il comportamento con il filtro per i nomi dei file e la posizione del trigger-file indicati, quindi conferma che il batch esca dallo stato «open» oppure identifica la condizione che non viene soddisfatta.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- aws, python
- Ambito
- cloud, databases
- Tipo di issue
- Bug
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 28/100