隨機誤差:至少一列必須指定表嗎?

[Jujiro]

我有下麵的代碼在一個筆記本上。隨機給我錯誤的,”至少一列必須指定表。”The error occurs (if at all it occurs) only on the first run after attaching to a cluster.

集群的細節:

總結

5 - 10的工人

320 - 640 GB memory40 - 80 Cores1司機

64 GB內存,8核心運行時

10.4.x-scala2.12 Apache火花3.2.1之上

什麼好主意嗎?

[Jujiro]

我隻是想簡化的代碼演示目的。在我的情況下,錯誤發生在ALTER TABLE語句後的insert語句。

[哈羅德]

請檢查是否這將有助於:

spark.databricks.delta.catalog.update.enabled假