創建一個內存表的火花,將數據插入它

[Sri1]

你好,

我的要求是需要創建一個火花內存表(不推蜂巢表到內存中)將數據插入,最後寫回到蜂巢表。

思想是寫作時避免磁盤IO為目標蜂巢表。有很多的insert語句,但我想寫回蜂巢表隻有在所有的執行結束。

你能請讓我知道如果這是可能的。請讓我知道如果你有更好的解決方案

感謝和問候,

~斯裏蘭卡

[Bill_Chambers]

嗨,斯裏蘭卡,

它可能是值得你花時間經曆一些DataFrame教程。這裏有一個很好的一個來自我們DataFrames的基礎知識。這種材料可以幫助您了解如何創建一個收集scala DataFrames和學習更多的細微差別!