為什麼我看到數據丟失與結構化流工作嗎?

[User16869510359]

我有一個火花結構化流工作從卡夫卡和讀取數據加載到三角洲表。我有一些在寫作前的流數據轉換和聚合δ表

[User16869510359 · Accepted solution]

典型的數據丟失的原因在一個結構化的流媒體應用程序不正確的值設置為水印。水印是為了確保應用程序不發展國家在很長一段時期,然而,它應該確保應用程序不會丟失數據,因為低價值的水印。