你好,
我們遷移到統一目錄(加州大學),很少有我們的表,我們得到以下錯誤當試圖寫甚至顯示它們。通常我們使用的是加州大學啟用集群,運行時版本12.2 LTS。以下錯誤,當它發生時,它看起來像它的直接原因是運行時版本(12.2 LTS),切換到10.4 LTS使代碼成功運行。
代碼從目錄讀取一些表,創建一個新的產品在目錄表B使用從目錄表,最後創建一個轉換版本的產品表並將它保存在目錄B。
錯誤:
org.apache.spark。火花Exception: Job aborted due to stage failure: Task 0 in stage 8.0 failed 4 times, most recent failure: Lost task 0.3 in stage 8.0 (TID 32) (10.128.200.145 executor 0): Failure to initialize configuration for storage account aaaaaaaaaaaa.dfs.core.windows.net: Invalid configuration value detected for fs.azure.account.keyInvalid configuration value detected for fs.azure.account.key
有人遇到過類似的事情在過去嗎?如果是,請詳細說明什麼是潛在的問題,該采取什麼措施來避免這種情況在未來。
提前感謝你的時間!