取消
顯示的結果
而不是尋找
你的意思是:

從磚筆記本使公平調度器

HariharaSam
貢獻者

如何啟用公平調度器使用python命令從磚的筆記本嗎?

2回答2

Hubert_Dudek1
尊敬的貢獻者三世
spark.conf.set (“spark.scheduler。模式”,“公平”)sc.setLocalProperty (“spark.scheduler。池”、“pool1”)

請使用上麵的配置設置,使公平(round robin)模式,而不是默認的FIFO。

使用上麵的示例中,您還可以為每個工作/筆記本設置一個單獨的池。

匿名
不適用

嗨@Hariharan森

希望一切都好!隻是想檢查如果你能解決你的問題,你會很高興分享解決方案或答案標記為最佳?其他的請讓我們知道如果你需要更多的幫助。

我們很想聽到你的聲音。

謝謝!

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map