跳轉到主要內容

工作流

統一編製的數據,分析和人工智能在Lakehouse

工作流的頭

磚工作流編排管理服務,與磚Lakehouse完全集成平台。Beplay体育安卓版本工作流可以讓你輕鬆地定義、管理和監控多任務對ETL工作流,分析和機器學習管道。廣泛支持的任務類型,深度可觀測性能力和可靠性高,數據團隊能夠更好的自動化和編排任何管道和變得更有效率。

yipit

“如果我們回到2018年和磚工作流是可用的,我們就不會考慮構建一個定製的氣流設置。我們隻會使用工作流。”

工程經理——Hillevi Crognale YipitData
了解更多

圖6

簡單的創作

無論你是一個數據工程師,數據分析師或數據科學家,輕鬆地定義工作流,隻需單擊幾下鼠標就或使用您最喜愛的IDE。

圖形

可行的見解

得到全麵了解每個任務運行在每個工作流和立即得到通知需要解決的問題。

圖標的圖形

可靠性驗證

有完全管理編製服務意味著擁有內心的寧靜,你的生產工作流程啟動並運行。有99.95%的正常運行時間,磚工作流是由成千上萬的組織信任。

它是如何工作的呢?

工作流marketecture

統一的磚Lakehouse平台Beplay体育安卓版本

可靠性在生產

深監測和可觀測性

批處理和流

高效的計算

無縫的用戶體驗

wood mackenzie

“使用磚工作流允許我們鼓勵協作和分解過程的不同階段之間的牆。它允許我們說同樣的語言。”

副總裁-吳Yanyan數據,Wood Mackenzie
了解更多
工作流

統一的磚Lakehouse平台Beplay体育安卓版本

與外部業務流程工具,磚與磚Lakehouse完全集成的工作流平台。Beplay体育安卓版本這意味著你獲得本機工作區中的工作流編寫和自動化任何Lakehouse能力包括的能力三角洲生活表管道,磚的筆記本磚的SQL查詢。與統一目錄,得到每個工作流自動化的數據沿襲所以你留在控製整個組織的所有數據資產。

可靠性在規模

可靠性在規模

每一天,成千上萬的組織信任磚工作流運行的數以百萬計的生產工作負載在AWS, Azure和GCP 99.95%正常運行時間。有完全管理編製工具構建到磚Lakehouse意味著你不需要維護,更新或排除編排的另一個單獨的工具。

深監測和可觀測性

深監測和可觀測性

全麵整合與Lakehouse平台意味著磚比任何外部編排工作流提供了更好的Beplay体育安卓版本可觀測性工具。在每個工作流運行控製通過一個完整的視圖和設置失敗的通知提醒您的團隊通過電子郵件,鬆弛,PagerDuty或自定義webhook所以你可以獲得成功之前的問題快速解決數據消費者的影響。

批處理和流

批處理和流

磚工作流為你提供了一個單一的解決方案Lakehouse編排任務在任何情況下。使用預定的工作流運行循環工作,在預設的時間做批攝入或實現實時的數據管道連續運行。你也可以設置一個工作流運行新數據可用時使用文件到達觸發

高效的計算

高效的計算

編排與磚工作流自動給你更好的性價比,生產工作負載。當利用自動獲得顯著的成本節約工作的集群運行成本更低,而且隻有當一份工作計劃,這樣你就不會支付未使用的資源。此外,共享工作的集群讓你重複使用計算資源的多個任務,這樣你就可以優化資源利用率。

控製

集群”很容易旋轉一次,重用了所有不同的步驟和自旋下來當你完成。”

——吉米·庫珀聯合創始人兼首席技術官,控製
了解更多
工作流

無縫的用戶體驗

在自己喜歡的環境中定義工作流,輕鬆地創建工作流的磚工作區UI或使用你最喜歡的IDE。定義任務使用版本控製的筆記本在磚回購或在一個偏遠的Git存儲庫和堅持DevOps如CI / CD的最佳實踐。

集成

磚工作流提供了無縫集成與主導產業合作夥伴提供您靈活地定義工作流,滿足你的需要和你的數據解決方案的選擇

印度生物技術部實驗室標誌
Arcion
matillion標誌
azure數據工廠
apache氣流
fivetran-logo-small.svg
印度生物技術部實驗室標誌
Arcion
matillion標誌
azure數據工廠
apache氣流
fivetran-logo-small.svg

常見問題解答

編製的數據,分析和人工智能,指的是自動化、部署和管理等工作流程的ETL數據管道和機器學習模型的訓練。編製數據操作的一個重要組成部分,將數據解決方案生產至關重要。編製涉及管理工作流任務之間的依賴關係和調度執行這些任務。編製還包括計算資源分配和監控工作流。

準備好開始了嗎?

Baidu
map