numSourceRows大於預期

[rbricks]

嘿

我做的一個插入源DataFrame到目標表。說插入之前,我打印源DataFrame的行數,這是有點小於說numSourceRows操作完成後,我檢查operationMetrics。我突然意識到為什麼這是兩件事:

• 匹配的條件是匹配(它不是,我不止一次檢查。不會有意義,這將影響,據醫生說什麼)
• 一些行被修改,因為他們都寫在同一頁麵的其他真正修改行(仍然沒有意義)。

這個情況可能會導致什麼?

[werners1]

這確實有趣,永遠看著它。

我隻是搜索三角洲github空間和發現一些提交顯示有更多的不隻是數:

https://github.com/delta-io/delta/commit/d2804cb92a7e36863144c7be9c55df1c6f1c1a1e

https://github.com/delta-io/delta/commit/8624b92ddd8d47f98e91b88b19b6d4af2e09033b

[jose_gonzalez]

你能分享你的代碼片段嗎?也有預期的輸出。