Azure / Azure/MachineLearningNotebooks

DataBricksStep never ends

Offen
#1,603 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Jupyter Notebook
Sterne
4.4k
Forks
2.6k
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

Hi!
I've an AzureML pipeline with several DataBricksSteps. The former work perfectly but the latter never stops. It's very strange because I know that the script has finished running (I put a log at the end and I see it in my log file).
I tried with different versions of Azure packages (azureml-sdk, azureml-opendatasets ...) but it doesn't change anything. For information, the configuration of the DB cluster used for all steps is:

- spark_version = 7.3.x-scala2.12
- node_type = Standard_DS3_v2

Any idea what's wrong? Or is there a way to force the step to stop without canceling it?

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Reproduziere die AzureML-Pipeline, die mehrere DataBricksSteps enthält, und vergleiche die früheren Schritte mit dem letzten. Beginne mit dem gemeldeten Log, das zeigt, dass das Skript abgeschlossen ist, sowie mit den Clustereinstellungen (Spark 7.3.x-scala2.12, Standard_DS3_v2); abgeschlossen bedeutet, den Grund zu ermitteln, warum der letzte Schritt aktiv bleibt, oder zu dokumentieren, ob er ohne Abbruch gestoppt werden kann.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
azure, python
Bereich
cloud, machine-learning
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.