提供統一Metastore為每個環境使用起程拓殖

[mathiaskvist]

嗨

統一Metastore可以為每個Azure目前隻提供一次。我有三個環境Azure每個組成的一個單獨的訂閱和資源組(RG)。每個RG包含一個磚工作區和一個存儲賬戶持有的數據。此設置配置使用起程拓殖和每一個環境都有它自己的狀態文件。因此我想提供一個統一Metastore為每個環境,這是不可能的,因為隻能有一個metastore /地區。

這意味著隻有我的一個環境可以提供統一Metastore起程拓殖代碼會導致我成為一個巨大的混亂,因為它應該是環境意識。如起程拓殖為開發環境運行時將創建metastore和生產運行時它將導入metastore起程拓殖數據源(反之亦然)。

別人做什麼來處理這個問題?

[卡賓]

你沒有錯。你如何形容這是目前唯一的辦法特遣部隊。這應該是解決一旦帳戶級別API為加州大學納入特遣部隊(見公關在這裏)。然後你會4 statefiles 1帳戶級別tf狀態和3為dev /測試/刺激。直到那一天,你是正確的,你需要創建一個和參考。肯定很笨重,期待戶頭級別UC API集成到TF。