取消
顯示的結果
而不是尋找
你的意思是:

三角洲表上創建s3 null值

康斯坦丁
貢獻者三世

我有火花Dataframe中的數據和我寫一個s3的位置。它有一些複雜的數據類型結構等。當我在s3創建表上位置使用

使用三角位置創建表如果不存在table_name“s3: / /…/…”;

null值的表,我不知道什麼是錯的

1接受解決方案

接受的解決方案

Hubert_Dudek1
尊敬的貢獻者三世

@John康斯坦丁,

  • 試圖加載它DataFrame (spark.read.delta(路徑))和驗證加載,
  • 它可能更容易掛載S3的位置作為一個文件夾,以確保所有的數據都是有(dbutils或% fs檢查)和連接是否正常工作。
  • 也試著刷新table_name(表),
  • 分享更多的代碼,不知道什麼是精確加載。例如,三角洲文件夾應該加載,而不是特定的某一個文件,
  • 有部分/版本的δδ文件夾寫成一個拚花。你可以分別負載調試都是好的。

在原帖子查看解決方案

2回答2

Hubert_Dudek1
尊敬的貢獻者三世

@John康斯坦丁,

  • 試圖加載它DataFrame (spark.read.delta(路徑))和驗證加載,
  • 它可能更容易掛載S3的位置作為一個文件夾,以確保所有的數據都是有(dbutils或% fs檢查)和連接是否正常工作。
  • 也試著刷新table_name(表),
  • 分享更多的代碼,不知道什麼是精確加載。例如,三角洲文件夾應該加載,而不是特定的某一個文件,
  • 有部分/版本的δδ文件夾寫成一個拚花。你可以分別負載調試都是好的。

Kaniz
社區經理
社區經理

嗨@John康斯坦丁,你試試上麵的建議嗎?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map