驅動程序,但沒有反應,可能由於GC。

[vamsivarun007]

你好,

“司機,但沒有反應,可能是因為GC。”

這是在集群事件日誌消息。誰能幫我這個忙。GC意味著什麼?垃圾收集?我們可以控製它外部嗎?

[shyam_9]

嗨@vamsivarun007,

請通過以下KB文章來解決這個問題, https://kb.m.eheci.com/jobs/driver-unavailable.html GC是什麼,請檢查這個答案, https://forums.m.eheci.com/questions/14725/how-to-resolve-spark-full-gc-on-cluster-startup.html

[Carlos_AlbertoG]

spark.catalog.clearCache()為我解決這個問題