這是一個好主意使用時態表管理的三角洲表嗎?

[特雷]

嗨!

我想使用一個管理三角洲時態表,表的意義:

• 創建一個表在ETL過程管理
• 下降後管理表的過程

這樣我可以進行合並,插入或刪除行動比使用火花臨時視圖時不允許用戶執行它們。

由於托管表留在磚的控製飛機,我擔心影響控製飛機性能管理表的數據文件的大小或數量大(如s3 api調用限製)。

請提供我一些建議如果是一個好主意使用管理表作為時態表在我上麵提到的禮儀。

提前謝謝你的幫助,你的幫助將會非常感激!

[werners1]

就我個人而言,我更喜歡非托管表因為我喜歡控製存儲位置等。

但我很確定管理表也會正常工作。

也就是說:

我不會,除非需要序列化數據(性能明智)。臨時表的編寫是一種行動。這需要時間。然後,閱讀臨時表,過程目標和寫一遍。

當然檢查如果沒有(大)性能的影響。

[karthik_p · Accepted solution]

@Kwangwon易而不是性能,主要問題管理表隻要你刪除表,該表在數據被刪除。

如果你有好的用例報告,最好的方法是去與外部存儲位置來存儲你的表數據管理,這樣你的表元數據駐留在/ user /蜂巢/倉庫,在一些外部數據所在的位置,您可以訪問使用/ mnt / < xxxx >

我們有一個新選項叫統一目錄,你可以存儲管理表和數據的存儲,是最好的選擇來克服績效和治理。

[Kaniz]

嗨@Kwangwon易,我們一直沒有收到你自從上次反應@Werner Stinckens @karthik p,我檢查是否你有一個決議。

如果你有任何解決方案,請與社區分享,因為它可以幫助別人。否則,我們將與更多的細節和試圖幫助回應。

同時,請別忘了點擊“選擇最佳”按鈕時提供的信息幫助解決你的問題。