取消
顯示的結果
而不是尋找
你的意思是:

參數化azure存儲帳戶名稱火花集群配置數據磚

baatchus
新的貢獻者三世

想知道如果這是參數化azure存儲帳戶名磚火花集群配置的一部分嗎?

我有一個工作示例引用秘密範圍值的位置:

spark.hadoop.fs.azure.account.oauth2.client.id。< azurestorageaccountname > .dfs.core.windows.net{{秘密/ keyvault_secret_scope / sp-id}} spark.hadoop.fs.azure.account.oauth.provider.type。< azurestorageaccountname > .dfs.core.windows.net org.apache.hadoop.fs.azurebfs.oauth2。ClientCredsTokenProvider spark.hadoop.fs.azure.account.oauth2.client.endpoint。< azurestorageaccountname > .dfs.core.windows.nethttps://login.microsoftonline.com/05646f53 - 5 - e81 4 - a6a - 85 - f5 a1ee2189bea4/oauth2/tokenspark.hadoop.fs.azure.account.auth.type。< azurestorageaccountname > .dfs.core.windows.net OAuth spark.hadoop.fs.azure.account.oauth2.client.secret。< azurestorageaccountname > .dfs.core.windows.net{{秘密/ keyvault_secret_scope / sp-secret}}

但這並不工作如果我試穿的鑰匙:

spark.hadoop.fs.azure.account.oauth2.client.id。.dfs.core.windows.net{{秘密/ keyvault_secret_scope / azurestorageaccountname}}{{秘密/ keyvault_secret_scope / sp-id}} spark.hadoop.fs.azure.account.oauth.provider.type。{{秘密/ keyvault_secret_scope / azurestorageaccountname}} .dfs.core.windows.net org.apache.hadoop.fs.azurebfs.oauth2。ClientCredsTokenProvider spark.hadoop.fs.azure.account.oauth2.client.endpoint。{{秘密/ keyvault_secret_scope / azurestorageaccountname}} .dfs.core.windows.nethttps://login.microsoftonline.com/05646f53 - 5 - e81 4 - a6a - 85 - f5 a1ee2189bea4/oauth2/tokenspark.hadoop.fs.azure.account.auth.type。{{秘密/ keyvault_secret_scope / azurestorageaccountname}} .dfs.core.windows.net OAuth spark.hadoop.fs.azure.account.oauth2.client.secret。.dfs.core.windows.net{{秘密/ keyvault_secret_scope / azurestorageaccountname}}{{秘密/ keyvault_secret_scope / sp-secret}}

如果它是不可能的你怎麼能取代環境之間的集群配置?

我需要azure存儲帳戶名稱在DEV vs刺激是不同的。

1接受解決方案

接受的解決方案

baatchus
新的貢獻者三世

我找到了解決方案:

我可以刪除特定的存儲賬戶和所有存儲賬戶的憑證是通用的

https://stackoverflow.com/questions/71220563/parameterize-azure-storage-account-name-in-spark-cluste..。

在原帖子查看解決方案

4回複4

匿名
不適用

你好,@baatch我們!謝謝你帶你的問題社區!我們會給其他成員有機會回應之前,如果我們需要回來。:slightly_smiling_face:

Atanu
尊敬的貢獻者
尊敬的貢獻者

@baatch我們集群配置的作品無論在不同環境。所以你可以根據你的要求改變集群配置。所以它是像你想使用不同的存儲賬戶?

baatchus
新的貢獻者三世

我找到了解決方案:

我可以刪除特定的存儲賬戶和所有存儲賬戶的憑證是通用的

https://stackoverflow.com/questions/71220563/parameterize-azure-storage-account-name-in-spark-cluste..。

匿名
不適用

太棒了!謝謝你讓我們知道!

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map