Azure / Azure/MachineLearningNotebooks
Retry pipeline and/or task on failure
- Vorherrschende Sprache
- Jupyter Notebook
- Sterne
- 4.4k
- Forks
- 2.6k
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Beschreibung
I use the Python SDK to develop ML pipelines for Azure ML.
How do I get my PythonScriptStep tasks or the encompassing Pipeline object to simply rerun upon failure?
I reckon it's pretty common for pipelines to temporarily break upon temporary network, storage, etc. issues so a simple rerun / retry seems pretty basic for task orchestration frameworks to provide (see e.g. Apache Airflow).
I've spent a fair amount of time going over the documentation for Azure ML and I just can't figure out how to get "retry upon failure" behaviour.
The closest there is is the continue_on_step_failure pipeline / task parameter which doesn't really do what's needed.
Any advice please?
I've tried finding a solution on SO over here - a proposed solution uses external tools which just adds more overhead:
https://stackoverflow.com/questions/68647922/azure-machine-learning-pipeline-how-to-retry-upon-failure
Beitragsleitfaden
Für dieses Repository ist kein Beitragsleitfaden indexiert
Rechercherichtung
Beginnen Sie mit der Azure ML Python SDK-Dokumentation zu PythonScriptStep, Pipeline und continue_on_step_failure und vergleichen Sie anschließend den verlinkten Stack Overflow-Vorschlag. Es ist keine Repository-Datei oder kein Test angegeben; als erledigt würde eine eindeutig unterstützte Wiederholungslogik gelten oder ein minimales reproduzierbares Notebook zusammen mit Validierungsschritten, die die gewünschte Änderung klären.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- azure, machine-learning, python
- Bereich
- cloud, machine-learning
- Issue-Typ
- Feature
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 25/100