你好,
磚上我們有兩個工作區,刺激刺激和dev。,如果我們創建一個新的通用集群通過web界麵和去環境引發的UI,spark.master正確設置是將主機IP。這個結果在一個集群中,以獨立模式運行。
然而,我們有一個非常類似的工作空間,開發,如果我們創建一個新的通用集群在完全相同的方式,spark.master將當地[*],這意味著集群是在本地模式下運行,不試圖利用執行人!沒有設置被覆蓋或集群中定義不同的創建過程,我們都知道的!
有一些火花的配置在工作區或帳戶,我們需要改變為一個新的通用集群不默認本地模式?
提前謝謝!
嘿,夥計們,謝謝你回到我和抱歉延遲。
我們設法找到問題由於磚的支持!有一個bash腳本,有人直接上傳到dbfs: /磚/ init啟動後設置集群到本地模式
一旦我們刪除它,一切都很好!讀者警告未來!