問題您的Apache火花工作失敗與FileReadException錯誤當試圖讀DBFS文件係統(磚)上的文件安裝路徑。org.apache.spark。SparkException:工作階段失敗而終止:任務x y階段失敗了n次,最近的失敗:在舞台上失去了任務0.3 141.0 (TID 770) (x.y.z。z執行人0):com.databricks.s……

您可以使用我會話令牌使用Hadoop配置支持訪問S3存儲數據磚運行時8.3及以上。信息不能掛載S3路徑DBFS山當使用會話憑證。您必須使用S3A URI。從集群中提取會話憑證從集群中提取會話的憑證。你需要實例…

問題外部metastore集群配置和啟用自動定量,但集群不是有效的自動定量。因為你將metastore jar複製到每一個執行者,當他們隻需要在司機。需要時間來初始化和運行jar每次新遺囑執行人旋轉起來。因此,添加更多的前女友……

問題您的集群的火花不應用配置值。因為這發生在當火花配置集群配置中聲明值以及一個init腳本。當火花配置值位於多個地方,init腳本中配置優先和集群忽略了配置設置…

問題你想要更新一個IP訪問列表,你得到一個INVALID_STATE錯誤消息。{“error_code”:“INVALID_STATE”、“消息”:“你目前的IP 3.3.3.3不允許訪問工作區在當前配置”}導致IP訪問列表更新你想提交不包括當前的公共IP地址。如果你……