集群自動定量是如何工作的呢?

[User16826992666]

決定當集群自動定量激活添加和刪除的員工嗎?同時,可以調整嗎?

[sajith_appukutt · Accepted solution]

>決定當集群自動定量激活添加和刪除員工

在降低,服務刪除一個工人隻有閑置和改組不包含任何數據。這允許積極調整沒有殺戮任務或再計算中間結果。它還尺度集群積極響應需求響應不犧牲效率高。更多的細節在//m.eheci.com/blog/2018/05/02/introducing-databricks-optimized-auto-scaling.html

>另外,可以調整嗎?

磚提供兩種類型的集群節點自動定量:標準和優化。根據不同的類型,您可以調整的參數

spark.databricks。aggressiveWindowDownS spark.databricks.autoscaling.standardFirstStepUp