如何設置分區流三角洲桌子上嗎?

[Leszek]

假設我們有3流三角洲表:

• 青銅
• 銀
• 黃金

我的目標是將分區添加到銀表(例如按日期)。

所以,由於黃金表拋出一個錯誤源表已更新,我需要設置“ignoreChanges”流“真實”選項。然後將所有數據流將工作,但從銀(所有文件已經更改)金導致重複。

我的問題是如何處理這個問題的最好方法嗎?

有可能操縱流檢查站嗎?

[werners1]

更改數據提要功能(你的銀表),結合合並表在你的黃金嗎?

https://docs.microsoft.com/en-us/azure/databricks/delta/delta-change-data-feed

[Leszek]

我從未使用過疾控中心在磚,但英語教學架構基於流媒體,我不想改變這種關係。

[Kaniz]

嗨@Leszek,我們一直沒有收到你最後的回應@Werner Stinckens,我檢查,看看他的建議幫助你。

否則,如果你有任何解決方案,請與社區分享,因為它可以幫助別人。

同時,請別忘了點擊“選擇最佳”按鈕時提供的信息幫助解決你的問題。