集群重用為三角洲住表

[John_BardessGro]

我有幾個筆記本與不同的生活表δ生活表工作,這樣我可以使用多個目標模式名。我知道可以重用一個集群工作段但有可能為這些三角洲生活表工作(運行在序列)重用創建的集群的第一份工作。我跑到客戶azure配額問題環境,這將幫助很多。

似乎如果我運行一個單獨的工作多次(可以稱之為銀),它將小集群使用過,但如果我運行另一份工作(可以稱之為黃金),它試圖開始自己的集群配置即使他們使用相同的集群配置

[Hubert_Dudek1]

相同的DLT工作(工作流)將使用相同的集群發展模式(關閉2 h)和新生產(關閉0)。盡管在JSON,可以操作的值:

{"配置":{“pipelines.clusterShutdown.delay”:“60年代}}

你可以操縱Azure的配額通過使用不同的實例,而且,對於較小的流;你可以設置工人為0

{“集群”:[{“標簽”:“默認”,“node_type_id”:“Standard_D3_v2”、“driver_node_type_id”:“Standard_D3_v2”、“num_workers”: 0}]}

我希望池將被添加到DLT和serverless選項。

[jose_gonzalez]

謝謝你分享這個@Hubert杜德克。我強烈推薦你@John Fico追隨休伯特的建議。如果你想要檢查我們的文檔,請去這裏https://docs.m.eheci.com/workflows/delta-live-tables/delta-live-tables-configuration.html集群……

[Kaniz]

嗨@John Fico,我們一直沒有收到你自從上次反應@Hubert杜德克和@Jose岡薩雷斯,我檢查是否你有一個決議。

如果你有任何解決方案,請與社區分享,因為它可以幫助別人。否則,我們將與更多的細節和試圖幫助回應。

同時,請別忘了點擊“選擇最佳”按鈕時提供的信息幫助解決你的問題。