Azure / Azure/MachineLearningNotebooks
Retry pipeline and/or task on failure
- Lingua principale
- Jupyter Notebook
- Stelle
- 4.4k
- Fork
- 2.6k
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
I use the Python SDK to develop ML pipelines for Azure ML.
How do I get my PythonScriptStep tasks or the encompassing Pipeline object to simply rerun upon failure?
I reckon it's pretty common for pipelines to temporarily break upon temporary network, storage, etc. issues so a simple rerun / retry seems pretty basic for task orchestration frameworks to provide (see e.g. Apache Airflow).
I've spent a fair amount of time going over the documentation for Azure ML and I just can't figure out how to get "retry upon failure" behaviour.
The closest there is is the continue_on_step_failure pipeline / task parameter which doesn't really do what's needed.
Any advice please?
I've tried finding a solution on SO over here - a proposed solution uses external tools which just adds more overhead:
https://stackoverflow.com/questions/68647922/azure-machine-learning-pipeline-how-to-retry-upon-failure
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Direzione di ricerca
Iniziare dalla documentazione di Azure ML Python SDK per PythonScriptStep, Pipeline e continue_on_step_failure, quindi confrontare la proposta collegata su Stack Overflow. Non sono identificati file del repository né test; il lavoro sarebbe completato con un comportamento di retry chiaramente supportato, oppure con un notebook minimo riproducibile e passaggi di convalida che chiariscano la modifica richiesta.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- azure, machine-learning, python
- Ambito
- cloud, machine-learning
- Tipo di issue
- Funzionalità
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 25/100