Azure / Azure/MachineLearningNotebooks
DataBricksStep never ends
- 主要言語
- Jupyter Notebook
- スター
- 4.4k
- フォーク
- 2.6k
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
Hi!
I've an AzureML pipeline with several DataBricksSteps. The former work perfectly but the latter never stops. It's very strange because I know that the script has finished running (I put a log at the end and I see it in my log file).
I tried with different versions of Azure packages (azureml-sdk, azureml-opendatasets ...) but it doesn't change anything. For information, the configuration of the DB cluster used for all steps is:
- spark_version = 7.3.x-scala2.12
- node_type = Standard_DS3_v2
Any idea what's wrong? Or is there a way to force the step to stop without canceling it?
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
複数の DataBricksSteps を含む AzureML パイプラインを再現し、前のステップと最後のステップを比較します。まず、スクリプトが完了したこととクラスター設定 (Spark 7.3.x-scala2.12, Standard_DS3_v2) を示す報告済みのログから開始します。完了とは、最後のステップがアクティブなままになる理由を特定すること、またはキャンセルせずに停止できるかどうかを記録することを意味します。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- azure, python
- 領域
- cloud, machine-learning
- issue の種類
- バグ
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 活発さ
- 停滞
- 明瞭さ
- 説明が足りない
- 初心者へのやさしさ
- 25/100