磚體係結構概述

高級體係結構

磚結構,使安全的跨職能團隊協作,同時保持大量的後端服務由磚,這樣你就可以專注於你的數據科學、數據分析和數據工程任務。

磚的運營控製飛機和一個數據平麵。

盡管架構可以取決於自定義配置,下圖是最常見的結構和數據流數據磚在AWS環境。

下圖描述了典型的數據平麵的總體架構。建築細節Serverless數據平麵,用於Serverless SQL倉庫,看看Serverless計算。

控製平麵和數據平麵

• 磚的控製平麵包括後端服務管理的AWS帳戶。筆記本命令和許多其他工作區配置存儲在控製平麵和加密在休息的時候。

• 飛機是你的數據處理的數據。

  • 對於大多數磚計算,計算資源是在所謂的AWS帳戶經典的數據平麵。這是類型的數據平麵磚使用筆記本電腦,工作,職業和經典的磚SQL的倉庫。

  • 如果你啟用Serverless計算磚SQL,磚SQL的計算資源共享Serverless數據平麵。筆記本電腦的計算資源,工作,職業和經典磚SQL倉庫仍住在典型的數據平麵在客戶帳戶。看到Serverless計算。

使用磚連接器連接集群外部數據源AWS帳戶以外的攝取數據或存儲。你也可以從外部攝取數據流數據來源,比如事件數據流數據,物聯網數據,等等。

你的數據存儲在湖在自己的AWS帳戶。

工作結果駐留在存儲在您的帳戶。

交互式筆記本控製平麵的結果存儲在一個組合(表示在UI中部分結果)和你的AWS存儲。如果你想要互動筆記本結果隻存儲在雲賬戶存儲,你可以問你的磚代表的支持交互式筆記本導致客戶帳戶為你的工作空間。注意,一些關於結果的元數據,如表列名,繼續被存儲在控製飛機。這個特性是在公共預覽。

E2架構

2020年9月,磚的E2版本發布的平台,它提供了:Beplay体育安卓版本

• Multi-workspace賬戶:使用的每個帳戶創建多個工作區賬戶API 2.0。

• Customer-managed vpc:創建磚工作區在自己的VPC,而不是使用默認架構創建集群在一個AWS VPC,磚在AWS帳戶創建和配置。

• 安全集群連接:也稱為“沒有公共IP安全集群連接允許您啟動集群中所有節點隻有私有IP地址,提供增強的安全。

• Customer-managed密鑰管理服務:提供公裏Databricks-managed密鑰加密的筆記本和秘密數據控製飛機。

隨著功能令牌管理、IP訪問列表,集群政策,和我憑據透傳,E2架構使磚平台AWS更安全、更可伸縮的,和更簡單的管理。Beplay体育安卓版本

新accounts-except E2平台上選擇自定義帳戶創建。Beplay体育安卓版本大多數現有的賬戶被遷移。如果你不確定你的賬戶是否在E2平台上,請聯係您的磚的代表。Beplay体育安卓版本