與我們的發射的工作編製磚、編排管道已明顯變得更容易。能夠獨立的ETL或ML管道在多個任務提供了大量的關於創建和管理優勢。這種模塊化方法,團隊可以獨立定義和各自的工作職責,同時允許並行處理來減少總執行時間。此功能是一個重大步驟在改變我們的客戶如何創建、運行、監控和管理複雜的數據和機器學習在任何雲工作流。beplay体育app下载地址今天,我們興奮地分享我們進一步增強編製能力,能夠重用相同的集群跨多個任務的工作運行,為我們的客戶節省更多的時間和金錢。beplay体育app下载地址
直到現在,每個任務都有自己的集群,以適應不同類型的工作負載。這種靈活性允許細粒度的配置時,它還可以引入一個時間和成本開銷在集群啟動或未充分利用並行任務。
為了保持這種靈活性,但進一步提高利用率,我們興奮地宣布集群重用。客戶可以通過共享工作在多個集群任務減少工作的時間,降低成本通過消除與並行任務開銷和提高集beplay体育app下载地址群利用率。
當定義一個任務時,客戶可以選擇配置一個新的集beplay体育app下载地址群或選擇現有的一個。集群與重用,你的現有集群現在將包含集群列表中定義的其他任務的工作。當多個任務共享工作的集群,集群將被初始化,當第一個相關任務開始。這個集群將繼續到最後使用該集群完成任務。這種方式沒有額外的啟動時間集群初始化後,導致在使用集群工作時間/成本降低,仍與其他工作負載隔離。
我們希望你和我們一樣興奮和這個新功能。了解更多關於集群重用和開始使用共享工作集群現在保存啟動時間和成本。請接觸如果你有任何對我們的反饋。
