Azure / Azure/MachineLearningNotebooks
DataBricksStep never ends
- Langage dominant
- Jupyter Notebook
- Étoiles
- 4.4k
- Forks
- 2.6k
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Description
Hi!
I've an AzureML pipeline with several DataBricksSteps. The former work perfectly but the latter never stops. It's very strange because I know that the script has finished running (I put a log at the end and I see it in my log file).
I tried with different versions of Azure packages (azureml-sdk, azureml-opendatasets ...) but it doesn't change anything. For information, the configuration of the DB cluster used for all steps is:
- spark_version = 7.3.x-scala2.12
- node_type = Standard_DS3_v2
Any idea what's wrong? Or is there a way to force the step to stop without canceling it?
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Reproduisez le pipeline AzureML contenant plusieurs DataBricksSteps et comparez les étapes précédentes avec la dernière. Commencez par le journal signalé indiquant que le script est terminé et par les paramètres du cluster (Spark 7.3.x-scala2.12, Standard_DS3_v2) ; le travail est terminé lorsqu’il s’agit d’identifier pourquoi la dernière étape reste active ou de documenter s’il est possible de l’arrêter sans annulation.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- azure, python
- Domaine
- cloud, machine-learning
- Type d'issue
- Bug
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Activité
- À l'abandon
- Clarté
- À clarifier
- Accessibilité débutants
- 25/100