0surface / 0surface/arxiveprior

Implement Extract task processing

Aperta
#19 0 commenti 0 reazioni 1 assegnatario Rivendicata da @0surface Vedi su GitHub
Lingua principale
C#
Stelle
1
Fork
0
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

**Simplified Extract work flow for archive background task**

- service is triggered
- service checks database for the last archive task
- if last unsuccessful, retry based on criteria (TODO later)
- if success, set the next query parameters and save task & task items to database
- Fetch task items and execute fetch-transform-persist operations
- update task items database records
- if failure, fail gracefully (TODO)
- when success update task database
- Emit event

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Cerca il servizio di attività in background dell'archivio e i modelli di database per le attività e gli elementi delle attività. Comprendi le operazioni di fetch-transform-persist e come vengono emessi gli eventi. Il lavoro prevede la configurazione di un nuovo flusso di elaborazione, quindi inizia esaminando i servizi esistenti e il livello dati per vedere come vengono attualmente gestite le attività.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
azure, csharp
Ambito
backend, data-engineering
Tipo di issue
Funzionalità
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Abbastanza chiara
Idoneità per principianti
45/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.