取消
顯示的結果
而不是尋找
你的意思是:

部署就緒的示例源代碼三角洲生活表&自動裝卸機

Sanjay_AMP
新的貢獻者二世

你好,

我們正計劃開發一個基於自動裝卸機DLT管道需要

  • 部署通過CI / CD管道
  • 可觀測的

誰能請我指向源代碼,我們可以從一個堅實的基礎,而不是落入newbie-pattern嗎?

謝謝提前

桑傑

1回複1

Priyanka_Biswas
新的貢獻者三世
新的貢獻者三世

@Sanjay_AMP

三角洲生活表和自動裝卸機可以一起使用增量地攝取來自雲對象存儲的數據。
•Python代碼示例:
——定義一個表稱為“顧客”,從CSV文件中讀取數據beplay体育app下载地址對象存儲在雲。
——定義一個表稱為“sales_orders_raw”,從JSON文件中讀取數據對象存儲在雲。
•SQL代碼示例:
——創建或刷新流表稱為“顧客”,選擇所有的數據從一個CSV文件雲存儲對象。beplay体育app下载地址
——創建或刷新流表稱為“sales_orders_raw”從JSON文件選擇所有數據對象存儲在雲。
•可以傳遞到選項cloud_files ()方法使用map ()函數。
•模式可以為指定格式不支持模式推理。
•額外的代碼示例和文檔可以在提供的來源。
@dlt。表def客戶():返beplay体育app下载地址回(spark.readStream.format .option (“cloudFiles (“cloudFiles”)。”、“csv格式”).load (/ databricks-datasets / retail-org客戶/)beplay体育app下载地址)@dlt。表def sales_orders_raw():返回(spark.readStream.format .option (“cloudFiles (“cloudFiles”)。”、“json格式”).load (" / databricks-datasets / retail-org sales_orders / "))
歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map