ETL框架是第一個自動管理基礎設施工程,將現代軟件工程實踐數據,允許數據工程師和分析師專注於轉換數據,不管理管道
舊金山——4月5日,2022年磚,數據的數據和AI公司和先鋒lakehouse範式,今天宣布三角洲住表的一般可用性(DLT),第一個ETL框架使用一個簡單的聲明性方法構建可靠的數據管道和自動管理數據大規模基礎設施。將SQL查詢轉化為生產ETL管道通常需要大量的繁瑣,複雜的操作工作。利用現代軟件工程實踐自動化工程中最耗時的部分數據,工程師和分析師可以專注於交付數據而非管道的操作和維護。
隨著公司的發展策略來獲取最大價值的數據,許多人會雇傭貴,高技能數據工程師——資源已經很難獲得,以避免延誤和失敗的項目。經常不清楚的是,很多延誤或失敗的項目是由一個核心問題:很難建立可靠的數據管道自動工作沒有很多操作嚴格保持運行。這樣,即使在小範圍,數據專業人員的大部分時間都花在工具和管理基礎設施,以確保這些數據管道不休息。
三角洲生活表是第一個也是唯一一個ETL框架來解決這個問題通過結合現代工程實踐和自動管理的基礎設施,而過去的努力在市場上隻能解決一個方麵。它簡化了ETL開發允許工程師隻是描述數據轉換的結果。三角洲生活表然後理解依賴完整數據管道的自動化和生活了幾乎所有的手動的複雜性。它還使數據工程師對待他們的數據代碼和應用現代軟件工程最佳實踐測試、錯誤處理、監控、和文檔更容易大規模部署可靠的管道。三角洲生活表完全支持Python和SQL和適合流媒體和批處理工作負載工作。
三角洲生活表已經給生產用例在仲量聯行等全球領先企業,殼牌、巨型,麵包金融和ADP。“在ADP,我們是我們的人力資源管理數據遷移到一個集成的數據存儲在lakehouse。三角洲生活表已經幫助我們的團隊構建質量控製,因為聲明式api,支持批處理和實時隻使用SQL,這使得我們的團隊能夠節省時間和精力在管理我們的數據,”傑克說,首席數據官ADP。
“DLT的力量來自沒有其他人可以做的事——結合現代軟件工程實踐和自動管理基礎設施。這是改變遊戲規則的技術,允許數據工程師和分析師會比以往任何時候都更富有成效,”阿裏Ghodsi說,首席執行官和共同創始人磚。“它還拓展了磚的達到;DLT支持任何類型的數據負載與單個API,不再需要先進工程技術數據。”
學習更多的磚的博客。
對磚
磚是數據和AI公司。全世界有超過7000個組織——包括康卡斯特,康泰納仕,H&M,和超過40%的財富500強——依賴於磚Lakehouse平台統一數據,分析和人工智能。Beplay体育安卓版本磚的總部設在舊金山,在世界各地設有辦事處。由最初的創造者Apache火花™,三角洲湖和MLflow,磚的使命是幫助團隊解決世界難題的數據。了解更多,請遵循磚推特,LinkedIn和臉譜網。
媒體接觸:
(電子郵件保護)