雪花
雪花是一個基於雲的SQL數據倉庫。這篇文章解釋了如何讀取數據,寫入數據使用磚雪花雪花連接器。
雪花火花筆記本連接器
以下筆記本提供簡單的例子如何寫數據和讀取數據的雪花。看到使用火花連接器為更多的細節。特別是,看到設置配置選項的連接器對所有配置選項。
提示
避免暴露你的雪花在筆記本使用用戶名和密碼秘密,這中演示了筆記本。
常見問題(FAQ)
為什麼不我火花DataFrame列在雪花出現在相同的順序嗎?
火花的雪花連接器不尊重表中列的順序寫入;您必須顯式地指定DataFrame和雪花列之間的映射。指定這個映射,使用columnmap參數。
為什麼整數數據寫入雪花總是讀回小數嗎?
雪花代表所有整數類型數量,這可能導致數據類型變化的數據寫入和讀取數據時從雪花。例如,整數可以轉換成數據小數當編寫雪花,因為整數和小數在語義上等價的雪花(見雪花數值數據類型)。
為什麼我的雪花表模式總是大寫的領域嗎?
雪花使用大寫字段默認情況下,這意味著表模式轉換為大寫。