如何改變在磚執行人實例的數量嗎

[al -]

我知道磚一個人均執行器節點運行。

我可以改變甲地。遺囑執行人通過添加參數(spark.executor.instances)集群中預先選擇嗎?我也可以通過這個參數當我計劃任務,這樣特定的任務將運行配置?

是明智的修改遺囑執行人params甲地。在stances and memory of executors or we need to go with the default one which is taken care by databricks internally.

[karthik_p]

@Harun消除Basheer通常1工人節點1執行人將在那裏,如果我們需要分裂,遺囑執行人在工人節點本身,我們可以基於核心內存分配,可以使用以下配置

1. spark.executor.cores
2. spark.executor.memory

下麵的文章將幫助你

如何配置單核運行執行人JNI庫-磚