Azure / Azure/MachineLearningNotebooks

DataBricksStep never ends

Ouverte
#1,603 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Jupyter Notebook
Étoiles
4.4k
Forks
2.6k
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

Hi!
I've an AzureML pipeline with several DataBricksSteps. The former work perfectly but the latter never stops. It's very strange because I know that the script has finished running (I put a log at the end and I see it in my log file).
I tried with different versions of Azure packages (azureml-sdk, azureml-opendatasets ...) but it doesn't change anything. For information, the configuration of the DB cluster used for all steps is:

- spark_version = 7.3.x-scala2.12
- node_type = Standard_DS3_v2

Any idea what's wrong? Or is there a way to force the step to stop without canceling it?

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Reproduisez le pipeline AzureML contenant plusieurs DataBricksSteps et comparez les étapes précédentes avec la dernière. Commencez par le journal signalé indiquant que le script est terminé et par les paramètres du cluster (Spark 7.3.x-scala2.12, Standard_DS3_v2) ; le travail est terminé lorsqu’il s’agit d’identifier pourquoi la dernière étape reste active ou de documenter s’il est possible de l’arrêter sans annulation.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
azure, python
Domaine
cloud, machine-learning
Type d'issue
Bug
Difficulté
4/5
Temps estimé
3-5 jours
Activité
À l'abandon
Clarté
À clarifier
Accessibilité débutants
25/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.