Azure / Azure/MachineLearningNotebooks
DataBricksStep never ends
- Vorherrschende Sprache
- Jupyter Notebook
- Sterne
- 4.4k
- Forks
- 2.6k
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Beschreibung
Hi!
I've an AzureML pipeline with several DataBricksSteps. The former work perfectly but the latter never stops. It's very strange because I know that the script has finished running (I put a log at the end and I see it in my log file).
I tried with different versions of Azure packages (azureml-sdk, azureml-opendatasets ...) but it doesn't change anything. For information, the configuration of the DB cluster used for all steps is:
- spark_version = 7.3.x-scala2.12
- node_type = Standard_DS3_v2
Any idea what's wrong? Or is there a way to force the step to stop without canceling it?
Beitragsleitfaden
Für dieses Repository ist kein Beitragsleitfaden indexiert
Rechercherichtung
Reproduziere die AzureML-Pipeline, die mehrere DataBricksSteps enthält, und vergleiche die früheren Schritte mit dem letzten. Beginne mit dem gemeldeten Log, das zeigt, dass das Skript abgeschlossen ist, sowie mit den Clustereinstellungen (Spark 7.3.x-scala2.12, Standard_DS3_v2); abgeschlossen bedeutet, den Grund zu ermitteln, warum der letzte Schritt aktiv bleibt, oder zu dokumentieren, ob er ohne Abbruch gestoppt werden kann.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Bewertung
- Tech-Stack
- azure, python
- Bereich
- cloud, machine-learning
- Issue-Typ
- Bug
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Aktivitätsstatus
- Veraltet
- Klarheit
- Muss geklärt werden
- Anfängerfreundlichkeit
- 25/100