DLT和模塊化(最佳實踐?)

[jeremy1]

我(非常)最近首次開始使用DLT。我遇到的一個挑戰是如何在我的管道包括其他“模塊”。我錯過了文檔,神奇的命令(除了% pip)被忽略,並首次運行工作流時非常不滿。

的最佳實踐是什麼在工作流包括常見的模塊?

我具體情況,我想要做的是創建一個單獨的模塊,它可以動態地生成一個dict預期給定一個特定的表…我絕對不想包括這是我所有的筆記本(幹)。任何意見/建議/ best-pratices新手如何做到這一點呢?

謝謝你的幫助和指導!

[User16764241763]

你好@Jeremy寇爾森謝謝你接觸磚社區論壇。

你能給這一試,如果你已經有一個回購在工作區中有關嗎?

我認為工程是在這方麵做一些改進。

https://docs.m.eheci.com/repos/index.html

下麵的代碼片段顯示了一個簡單的例子。你可以實現你自己的邏輯,試圖導入DLT管道。

導入係統導入pprint sys.path.append(“/工作區/回購/(電子郵件保護)/ arvindravish dlt_import”)從my_file進口myClass終極= myClass (5) val = newClass.getVal()打印(val * 5)

請提供你的反饋我們可以添加任何改進我們的產品待辦事項列表。

[hardy1982]

嗨Arvind,

我做的配置/是你的描述,但仍然失敗了。

下麵是我的截圖:

你能建議如何進行?

致以最親切的問候

魯本

[Greg_Galloway]

@Ruben Hartenstein注意到不同的圖標在你的截圖(筆記本)和圖標Arvind的職位。您需要使用此菜單選項創建一個任意文件,不是一個筆記本:

[hardy1982]

嗨@Greg洛韋,

非常感謝你的回複。根據你的建議我做了但是現在我麵臨著另一個錯誤當執行管道。

你能建議嗎?

致以最親切的問候

魯本