光子是下一代引擎在磚Lakehouse平台上以低成本提供極快的查詢性能——從數據攝入、ETL、流、數據科學和交互式查詢——直接在您Beplay体育安卓版本的數據。光子與Apache火花™api兼容,所以開始就可以輕鬆的把它——沒有代碼變更和鎖定。
更便宜、更快
從頭構建性能以較低的成本,最快的光子提供高達80%的TCO儲蓄而加速數據和分析工作負載- 12 x加速效果。
建立對所有用例
光子是第一個引擎,使數據團隊標準化一組api的所有工作負載,ETL、數據分析和科學——以批處理或流。
不需要修改代碼
光子是一個ANSI-compliant引擎設計兼容現代Apache火花api和與現有代碼——SQL, Python, R, Scala和Java——不需要重寫。
為什麼光子?
磚的查詢性能穩步提高,由Apache火花和成千上萬的優化包裝成磚運行時(DBR)的一部分。光子轉換成矢量圖——一個新的本地引擎完全用c++寫的——提供了一個額外的2 x加速/ TPC-DS 1 tb基準,和客戶觀察到3 x-8x平均加速效果,根據他們的工作負載,而最新的DBR版本。beplay体育app下载地址
用例
生產工作
在SQL和火花DataFrames加速大規模生產工作
物聯網應用
使用光子速度時間序列分析相比,火花和傳統磚運行時
數據隱私和遵從性
查詢pb級別的數據集來識別和刪除記錄與三角洲湖沒有複製數據,生產工作和光子
加載數據到三角洲湖和拚花
光子轉換成矢量圖的I / O速度對三角洲湖和拚花表的數據加載,降低總體運行時和工程工作的成本數據
它是如何工作的呢?
用c++寫的,光子利用現代硬件對於更快的查詢,提供12 x更好的價格/性能比其他雲數據倉庫,所有本地數據湖上。
光子被設計成與Apache火花DataFrame兼容和SQL api來確保工作負載運行無縫不更改代碼。你所要做的受益於光子是打開它。光子將無縫協調工作和資源和透明地加快您的SQL和火花的查詢。不需要調優或用戶幹預。
當我們開始光子主要集中在SQL來為客戶提供世界一流的數據倉庫性能的數據湖泊,我們的範圍顯著增加攝取來源,格式、api和方beplay体育app下载地址法支持的光子。結果,客戶看到了戲劇性的基beplay体育app下载地址礎設施成本節約和加速效果在所有現代光子激發工作負載(如SQL和DataFrame火花)。
統一目錄
Delta Live Tables
三角洲生活表
