上傳對磚的CSV文件代碼(注意UI)

[Rodrigo_Brandet]

大家好。

我對磚過程需要手動上傳CSV文件的日常。

我想知道如果有一種方法可以導入這些數據(例如,熊貓在python中,)沒有必要每天上傳這個文件手動使用UI。

非常感謝。

[Ryan_Chynoweth · Accepted solution]

您可以使用我們的DBFS REST API端點。注意,這個上傳數據,但你可能仍需要一個磚將數據加載到表的工作。

您還可以使用雲存儲的REST api或Python客戶機使用。

[亞曆克西斯]

嗨,羅德裏戈

如果你使用Azure磚你也可以嚐試自動裝卸機這將上傳數據到一個火花dataframe或直接到熊貓的dataframe。請注意,你需要設置您的工作區進行必要的權限。

這裏更多信息的鏈接攝取CSV數據與汽車裝載機- Azure磚工作區|微軟文檔

學習快樂!

[werners1]

自動裝卸機確實是一個有效的選項,

或使用某種形式的ETL工具,獲取文件並把它在你的雲提供商,Azure數據工廠或AWS膠等。