我在統一目錄
我想做一個印度生物技術部在本地運行的項目工程
但是磚印度生物技術部的工作流任務似乎忽略了項目。yml設置模式和目錄,以及定義在單個模型的配置塊
這是因為這奇怪的默認印度生物技術部行為默認前綴模式與目標模式?
*我怎麼“名稱”目標/檔案工作產生的“刺激”或“uat”而不是“databricks_cluster”?我現在可以閑逛了覆蓋generate_schema宏,但我確實喜歡使用不同的目標來改變行為esp在外部位置不同的環境(開發/測試/刺激)
* env增值?
*所有印度生物技術部生成資產在哪裏?他們可以嗎?
印度生物技術部文檔——在哪裏?或者我需要做手工(請沒有)
*通用測試?
@Jakub凱西:
如果你沒有能見度或控製dbt_CLI自動創建集群在磚,你需要設置特定的配置或為你的印度生物技術部運行環境變量,那麼你可能需要集群創建自己的堅持。
堅持集群是一個磚你創建和管理集群,印度生物技術部工作之間的持續運行。這可以讓你有更多的控製集群配置和環境變量。您可以設置自己的堅持集群所需的配置和環境變量,然後在印度生物技術部項目指定集群的目標配置文件。
要做到這一點,首先創建一個磚集群所需的配置和環境變量。然後,在印度生物技術部項目的目標配置文件,設置集群領域堅持創建集群的名稱。例如:
名稱:my_databricks_profile目標:類型:磚集群:my_persisted_cluster平台:磚地區:< your_region > workspBeplay体育安卓版本ace_url: < your_workspace_url > org_id: < your_org_id >標記:< your_token >
確保保存集群的集群的名稱字段中創建集群的名稱匹配磚。一旦你設置保存集群和更新您的印度生物技術部項目的目標配置文件,您可以運行你的印度生物技術部工作像往常一樣,它將使用指定集群持續執行。
嗨@Jakub K
對不起你找不到解決問題的答案。
我們的社區努力提供有用的和準確的信息,但有時立即隻能用於一些問題的解決方案。
我建議提供更多的信息關於你的問題,比如特定的錯誤消息,錯誤日誌或你有采取措施的細節。這可以幫助我們的社區成員更好地理解問題,提供更有針對性的解決方案。
或者,您可以考慮聯係支持團隊為你的產品或服務。他們也許能夠提供額外的援助或升級到適當的部分進一步調查。
謝謝你的耐心和理解,請讓我們知道如果有什麼我們能做的來幫助你。
嗨@Vidula卡納
我指的是新類型添加到最近磚——印度生物技術部管理工作https://learn.microsoft.com/en-us/azure/databricks/workflows/jobs/how-to/use-dbt-in-workflows
我很好奇它是如何工作在幕後,如果有任何限製/者
我有時使用條件邏輯基於目標(dev /測試/刺激)——我的第一個問題是我可以指定一個目標的工作嗎?我最初的測試顯示“沒有”,它的硬編碼databricks_job。這是正確的嗎?
接下來,我想要生成的文檔的副本從這個磚工作運行——有什麼建議模式嗎?如果我添加一個命令這個磚的工作“印度生物技術部文檔生成”有我把文件通過編程的方式嗎?
環境變量。我沒有看到一種集群設置到自動生成工作。我可以使用env var的集群管理工作或我需要創建/管理集群為印度生物技術部工作?