取消
顯示的結果
而不是尋找
你的意思是:

獲得“工作階段失敗”而中止SparkException當試圖下載完整的結果

Tahseen0354
貢獻者三世

我有使用SQL生成的結果。但每當我嚐試下載完整的結果(100萬行),投擲SparkException。我可以下載預覽結果但不是完整的結果。為什麼?在引擎蓋下麵會發生什麼當我試著下載完整的結果嗎?

這是例外:

SparkException:工作階段失敗而終止:任務0階段133.0失敗了4次,最近的失敗:在舞台上失去了任務0.3 133.0 2644年(TID)(192 * * *方式。x執行人6):com.databricks.sql.io。FileReadException:當abfss閱讀文件時發生錯誤:REDACTED_LOCAL_PART@someurl。它是可能的底層文件已經更新。您可以顯式地火花的緩存失效運行“REFRESH TABLE表”命令的SQL或重新創建數據集/ DataFrame參與。如果δ緩存過期或底層文件已被移除,你可以手動三角洲緩存失效重新啟動集群。

引起的:FileReadException:當abfss閱讀文件時發生錯誤:REDACTED_LOCAL_PART@someurl。它是可能的底層文件已經更新。您可以顯式地火花的緩存失效運行“REFRESH TABLE表”命令的SQL或重新創建數據集/ DataFrame參與。如果δ緩存過期或底層文件已被移除,你可以手動三角洲緩存失效重新啟動集群。

引起的:FileNotFoundException:操作失敗:指定的路徑不存在。”404頭,https:// * * * .snappy.parquet ? upn =誤動作= getStatus&timeout = 90

引起的:AbfsRestOperationException:操作失敗:指定的路徑不存在。”404頭,https:// * * * .snappy.parquet ? upn =誤動作= getStatus&timeout = 90

8回答說8

嗨@Md Tahseen安南,

你嚐試以下步驟重新運行查詢並得到完整的結果?文檔在這裏

Tahseen0354
貢獻者三世

現在的工作,我認為這是一個網絡問題。

匿名
不適用

@Md Tahseen安南,謝謝你讓我們知道。我很高興一切都工作!

rpshgupta
新的貢獻者三世

我也有這個問題一次又一次。我真的很想知道我們能做什麼來避免這種情況嗎?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map