三角洲表

[bgarcia]

我開始我的旅程到三角洲表和仍在困惑我的一件事是最好的地方在哪裏保存三角洲表以後如果你需要查詢它們。

比如我從on-prem幾個表遷移到azure磚成單個的三角洲表。我的問題是,我應該保存個人三角洲表大小可顯著DBFS磚內部存儲,或者我應該掛載一個blob存儲位置和保存三角洲湖表嗎?在這些情況下人們通常做什麼?

[fshimamoto · Accepted solution]

我通常建議人們將數據存儲在一個單獨的存儲賬戶(安裝或者直接使用),不要使用的內部存儲空間的任務。主要原因,這是更容易與其他工作區共享這些數據,或其他係統如果是必要的。應該主要用於內部存儲臨時文件、庫、init腳本等。

有很多有用的指南可以幫助:

https://github.com/Azure/AzureDatabricksBestPractices/blob/master/toc.md

https://github.com/Azure/AzureDatabricksBestPractices/blob/master/toc.md Do-not-Store-any-Production……

https://github.com/hurtn/datalake-ADLS-access-patterns-with-Databricks