表中提取創作凍結

[阿米特]

你好,

我有一個問題從三角洲湖表中提取創作。畫麵凍結在“X行檢索:”太久。

我成功地創建第一個提取但看到我丟失的一列。我繼續做一個完整的重寫

events_df.write.mode(“覆蓋”)。選項(“overwriteSchema”,“真正的”).partitionBy(分配的created_date”) .format (write_format) .save (save_path)

從那時起,試圖創建/刷新隻提取卡住在任意數量的行。

在磚的SQL和筆記本電腦,我可以讀表好…

我試著刷新提取、刪除並重新創建它,重新啟動我的電腦,做一遍……似乎沒有什麼工作。

知道這可能會引起什麼/怎樣解決呢?

[阿米特]

現在我隻是想再次提取,它工作。我嚴重困惑為什麼不是兩天前,無論如何,我已經盡力了。你有什麼建議關於如何研究這個過程的哪個部分壞了?

我也認為這是表,但我想確定。

[Prabakar]

我建議檢查辛巴司機日誌。我不了解的日誌,您可以檢查表。

[Kaniz]

嗨@Amit施泰納,我們一直沒有收到你最後的回應@Prabakar Ammeappin,我檢查是否你有一個決議。如果你有任何解決方案,請與社區分享,因為它可以幫助別人。否則,我們將與更多的細節和試圖幫助回應。

[阿米特]

嘿@Kaniz開羅,不幸的是,我沒有什麼新的分享。我沒有機會查看日誌作為任務繼續堆積……我認為它可以肯定的說,這是一個問題在畫麵的結束,這個問題並沒有再次體現磚,但體現了我的同事們在不同的場合與不同的數據源。我唯一的建議就是試圖重啟或您自己的機器上,如果可能的話,雲機如果你遇到相同的問題。