我指定init腳本部署。配置如下:
basic-static-cluster: &basic-static-cluster new_cluster: spark_version:“13.0.x-scala2.12”num_workers: 1 node_type_id:“n2-highmem-2”init_scripts: -工作區:目的地:文件:保險絲:/ / conf / init_libraries.sh
集群的初始化工作,我得到一個錯誤:
結果不可用:跑失敗與錯誤消息意想不到的失敗在等待集群(0509 - 103955 - fc4levri)準備:集群0509 - 103955 fc4levri是意想不到的狀態終止:INIT_SCRIPT_FAILURE (CLIENT_ERROR): databricks_error_message: RESOURCE_DOES_NOT_EXIST:沒有文件在/ dbfs / dbx / / conf / init_libraries.sh mosaic_workflows / adb789dd822f44a0bf8ee77ac54fad7a /工件。
我看到它使用正確的路徑的文件存在。我檢查DBFS位置和我能看到這個文件。
現在,我知道DBFS很快將被棄用,我應該保持文件工作區文件。我如何保持工作區使用DBX的文件嗎?當存儲文件工作區,這我怎麼引用使用保險絲嗎?