Azure / Azure/MachineLearningNotebooks
Retry pipeline and/or task on failure
- Linguagem predominante
- Jupyter Notebook
- Estrelas
- 4.4k
- Forks
- 2.6k
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Descrição
I use the Python SDK to develop ML pipelines for Azure ML.
How do I get my PythonScriptStep tasks or the encompassing Pipeline object to simply rerun upon failure?
I reckon it's pretty common for pipelines to temporarily break upon temporary network, storage, etc. issues so a simple rerun / retry seems pretty basic for task orchestration frameworks to provide (see e.g. Apache Airflow).
I've spent a fair amount of time going over the documentation for Azure ML and I just can't figure out how to get "retry upon failure" behaviour.
The closest there is is the continue_on_step_failure pipeline / task parameter which doesn't really do what's needed.
Any advice please?
I've tried finding a solution on SO over here - a proposed solution uses external tools which just adds more overhead:
https://stackoverflow.com/questions/68647922/azure-machine-learning-pipeline-how-to-retry-upon-failure
Guia de contribuição
Nenhum guia de contribuição indexado para este repositório
Direção de pesquisa
Comece pela documentação do Azure ML Python SDK sobre PythonScriptStep, Pipeline e continue_on_step_failure e, em seguida, compare a proposta vinculada do Stack Overflow. Nenhum arquivo do repositório ou teste é identificado; o trabalho estaria concluído com um comportamento de retry claramente suportado ou com um notebook mínimo reproduzível e etapas de validação que esclareçam a alteração solicitada.
Escrita pelo modelo de indexação a partir do texto da issue.
Avaliação
- Stack de tecnologia
- azure, machine-learning, python
- Domínio
- cloud, machine-learning
- Tipo de issue
- Funcionalidade
- Dificuldade
- 4/5
- Tempo estimado
- 3-5 dias
- Status de atividade
- Estagnada
- Clareza
- Precisa de esclarecimento
- Facilidade para iniciantes
- 25/100