在“運行命令……”

[Carneiro]

你好,

從昨天起,沒有一個已知的原因,一些命令,用於運行日報現在陷入了“命令運行”狀態。命令為:

dataframe.toPandas ()

dataframe.show (n = 1)

dataframe.description ()

dataframe.write.format (csv) .save(位置)

陷入“運行命令…”狀態,我收到沒有輸出

(或錯誤),直到服務器停止活動。在最好的情況下,命令

運行很長一段時間後,在糟糕的情況下,這項工作不能完成由於

不活動。

這是突然發生的,因為昨天沒有更新

磚運行或集群中。我將不勝感激任何建議。

關於集群:

61 gb | | 8核DBR 10.4 LTS |火花3.2.1 | Scala 2.12

問候,路易斯

[jose_gonzalez · Accepted solution]

嗨@Luiz Carneiro,

你能把你的火花的行動更CMD(段落)並運行一次檢查,它可以把額外的時間。同時,熊貓隻運行在你的驅動。你嚐試使用Python或Scala api呢?如果您熟悉熊貓api,那麼您可以使用考拉。這裏的文檔https://koalas.readthedocs.io/en/latest/

[Carneiro]

嘿,何塞,非常感謝你的回複。

我還沒有完全明白發生了什麼,但本周似乎一切工作正常,我沒有大的變化。如果我找到一些深刻的,我將把它寫在這裏。謝謝你無論如何!

[Kaniz]

嗨@Luiz Carneiro,看起來你的問題得到解決。你想馬克@Jose岡薩雷斯的回答是最好的嗎?