相關隨機誤差動態變量在SQL -必須指定至少一列(shallowclone表)

[lizou]

環境:蔚藍的

數據轉換模板,以s表名稱為變量。變量被設置在單獨的筆記本% . . / _config運行

淺克隆用於生成一個臨時表完全相同的目標表的列。

隨機ETL並發筆記本運行時發生錯誤。

錯誤日誌。(可能與集群資源?)

提前謝謝如果有任何見解提供了…

——創建一個臨時表數據轉換

下降表如果存在$ {v.source};

創建表如果不存在$ {v.source}

淺克隆referrals_audit;

截斷表$ {v.source};——淺克隆也使數據參考和我們應該刪除它

改變表$ {v.source}添加列(錯誤字符串);

在SQL語句錯誤:AnalysisException: org.apache.hadoop.hive.ql.metadata。HiveException:至少一列必須指定表

[Kaniz]

你好@lizou!我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在社區中有一個回答你的問題。否則我將盡快給你回電。謝謝。

[Hubert_Dudek1]

隨機ETL並發筆記本運行時發生錯誤。

都是使用相同的變量值為$ {v.source} ?

如果是的,這可以是邏輯問題作為一個筆記本其他刪除臨時表使用筆記本。

[lizou]

@Hubert杜德克謝謝回複

變量在每個筆記本是不同的。

到目前為止的錯誤隻發生一次,我可能需要保持目光。

這個想法與動態表名使用筆記本模板,merge語句

將動態生成使用表列清單。

附件是_config

筆記本叫_config設置不同的變量,因為變量“表”將在每個不同的筆記本。

[lizou]

錯誤再發生。我已經刪除了淺克隆在每個筆記本運行。

我的推理是有一個使用淺克隆的開銷,而且沒有必要

每次都重新創建臨時表結構表模式並沒有改變多少。

我有淺克隆在一個單獨的模式管理任務。

截斷表是唯一仍和問題不應該再次發生。