解決了!在創建一個集群時,錯誤:“失蹤必需字段spark_version”雖然是指定的 每次我試圖創建一個集群API我得到這個。甚至當我真正使用的示例JSON API文檔:“‘{:“cluster_name single-node-cluster”、“node_type_id”:“i3。超大”、“spark_version 7.6.x-scala2“:” …
為什麼沒有我的job-cluster縮小嗎? 嗨,Databricks-AWS上運行,我有一個工作一個集群上運行3個工人,每個(r6i.large)是雙核,啟用了自動定量。火花的工作有兩個階段:(1)高度可平行的cpu密集型階段。這個階段需要15分鍾。(2)一個非par……
