如何從dbfs下載一個文件到我的本地計算機的文件係統?

[PrithwisMukerje]

我有運行WordCount程序和保存輸出到一個目錄如下

counts.saveAsTextFile(“/用戶/數據/ hobbit-out1”)

後來我檢查輸出目錄包含預期的文件數量

% fs ls /用戶/數據/ hobbit-out1

我看到三個文件存在

dbfs: / /數據/ hobbit-out1 / _SUCCESS_SUCCESSdbfs:用戶/用戶/數據/ hobbit-out1 / - 00000 - 00000 - dbfs部分:一部分/用戶/數據/ hobbit-out1 /部分- 00001 - 00001

現在我想把文件dbfs: /用戶/數據/ hobbit-out1 /部分- 00000在我的本地計算機。

我知道訪問這些文件我要像我的瀏覽器指向一個URL

https://community.cloud.m.eheci.com/files/my-stuff/my-file.txt?o= # # # # # #

我在筆記本URL注意URL包含o = 7892876048313913所以我文件的URL

https://community.cloud.m.eheci.com/files/users/data/hobbit out1/part ?o=7892876048313913——00000

但這是我404年文件未找到錯誤。

誰能告訴我我的錯誤是什麼?在方法或建設的URL。

我還沒有試過S3路線,但會嚐試,如果這是唯一辦法dbfs文件。

感謝任何幫助或指導。

[Bill_Chambers · Accepted solution]

你必須使用FileStore。

https://docs.m.eheci.com/user-guide/advanced/filestore.html

你的錯誤就是你沒有把它適當的位置。你把它在一個不同的目錄。你必須把它/ FileStore /

[LiNKArsIdeni]

事實上,你不需要把它放在FileStore。您可以使用其他文件夾,如mnt。但是如果它存儲在mnt文件夾,您將需要這樣的:

https://community.cloud.m.eheci.com/dbfs/mnt/blob/ < file_name > . csv ? o = < your_number_here >; 請注意,這將提示您為您的登錄名和密碼,但是一旦你進入這個,下載應該是無縫的。

[夏娃]

也隻是CLI嗎?

DBFS CLI

[demongolem]

到目前為止這似乎最直接的結果。

磚fs cp < file_to_download > < local_filename >