寫數據幀火花ADLS在巨大的文本數據在數據幀。

[Santosh09]

火花和文本數據模式在數據幀結構類型火花是花太多時間寫/保存/推動ADLS或SQL數據庫數據或下載csv。

[User16764241763]

@shiva桑托什

必須檢查計數的dataframe ADLS你想保存嗎?

作為@Joseph Kambourakis提到了爆炸可能導致許多行,更好的檢查數據幀數,看看在工作區中OOMs火花。