有什麼方法可以控製autoOptimize間隔?

[User16869510359]

我能看到我流工作運行優化工作更加頻繁,有什麼財產我可以控製autoOptimize持續時間

[User16869510359 · Accepted solution]

autoOptimize不是表現在時間的基礎上。這是一個基於事件的觸發。一旦δ表/分區50(默認值spark.databricks.delta.autoCompact.minNumFiles)文件,auto-compaction觸發。

減少頻率,增加上述配置的價值。選擇你可以完全關閉auto-compaction,每天運行一個常規優化命令。