取消
顯示的結果
而不是尋找
你的意思是:

是否可以寫單火花流兩種不同三角洲表?建議在嗎?

匿名
不適用
1接受解決方案

接受的解決方案

Ryan_Chynoweth
尊敬的貢獻者三世

在這種情況下,最好的選擇是一個readStream閱讀源三角洲表。寫作時因為檢查點記錄控製δ表你可以為每個writeStreams維護單獨的日誌。

我建議將檢查點文件存儲在_checkpoint三角洲表目錄中的子目錄。“_”將允許火花忽略它當讀表,你能夠保持這些檢查點與適當的表。

在原帖子查看解決方案

1回複1

Ryan_Chynoweth
尊敬的貢獻者三世

在這種情況下,最好的選擇是一個readStream閱讀源三角洲表。寫作時因為檢查點記錄控製δ表你可以為每個writeStreams維護單獨的日誌。

我建議將檢查點文件存儲在_checkpoint三角洲表目錄中的子目錄。“_”將允許火花忽略它當讀表,你能夠保持這些檢查點與適當的表。

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map