2020年7月

這些特性和磚平台改進2020年7月被釋放。Beplay体育安卓版本

請注意

版本正在上演。磚帳戶可能沒有更新,直到一周後最初的發布日期。

網絡終端(公共預覽版)

2020年7月8月29日4日:3.25版

網絡終端為用戶提供一個方便的和高度交互的方式可以連接到允許集群上運行shell命令,包括如Vim或者Emacs的編輯器。示例使用的網絡終端包括監控資源使用和安裝Linux包。

與使用SSH、網絡終端可以使用許多用戶在一個集群,並且不需要設置鍵。

有關詳細信息,請參見網絡終端

新的、更安全的全球init腳本框架(公共預覽版)

2020年7月29日——8月4日:3.25版

新的全球init腳本框架帶來明顯改善了遺產全球init腳本:

  • Init腳本更安全,需要管理員權限來創建、查看和刪除。

  • 與腳本相關的所有發射失敗記錄。

  • 你可以設置多個init腳本的執行順序。

  • Init腳本可以參考相關的環境變量。

  • Init腳本可以創建和管理使用管理設置頁麵或新的全球Init腳本REST API。

磚建議你現有的遺留全球init腳本遷移到新框架利用這些改進。

有關詳細信息,請參見使用全局初始化腳本

現在IP訪問列表

2020年7月29日——8月4日:3.25版

IP訪問列表API現在投入使用。

GA版本包括一個變化,即重命名的list_type價值觀:

  • 白名單允許

  • 黑名單

使用IP訪問列表API來配置你的磚工作區,這樣用戶連接到服務隻有通過現有的企業網絡安全的周長。磚管理員可以使用IP訪問列表API定義一組通過IP地址,包括允許和阻止列表。所有傳入訪問web應用程序和REST api要求授權用戶連接從一個IP地址,保證工作區不能從公共網絡訪問咖啡店或機場,除非用戶使用VPN。

這個特性要求企業計劃

有關更多信息,請參見IP訪問列表工作區

新文件上傳對話框

2020年7月29日——8月4日:3.25版

你現在可以上傳小表格數據文件(csv),從一個筆記本通過選擇訪問它們添加數據的筆記本文件菜單。生成的代碼顯示了如何將數據加載到熊貓或DataFrames。管理員可以禁用這個特性在管理控製台中高級選項卡。

有關更多信息,請參見在DBFS瀏覽文件

SCIM API過濾和排序的改進

2020年7月29日——8月4日:3.25版

SCIM API現在包括這些過濾和排序的改進:

  • 管理員用戶可以過濾用戶活躍的屬性。

  • 所有用戶都可以使用的排序結果sortBy排序方式查詢參數。默認是按ID排序。

磚7.1運行時的遺傳算法

2020年7月21日

磚7.1運行時帶來的許多附加功能和改進磚7.0運行時,包括:

  • 穀歌BigQuery連接器

  • %皮普命令來管理Python庫安裝在筆記本會話

  • 考拉安裝

  • 許多三角洲湖的改進,包括:

    • 設置用戶定義元數據提交

    • 得到最後的版本提交當前寫的SparkSession

    • 轉換拚花表由結構化流使用_spark_metadata事務日誌

    • 合並性能改進

詳情,請參閱完成磚運行時的7.1(不支持)發行說明。

磚運行時7.1毫升

2020年7月21日

磚7.1運行時機器學習是建立在磚上運行7.1和圖書館帶來了以下新特性和變化:

  • pip和conda魔法命令默認啟用

  • spark-tensorflow-distributor: 0.1.0

  • 枕頭7.0.0 - > 7.1.0

  • - > 1.5.1 pytorch 1.5.0

  • torchvision 0.6.0 - > 0.6.1

  • horovod 0.19.1 - > 0.19.5

  • mlflow 1.8.0 - > 1.9.1

詳情,請參閱完成磚運行時為7.1毫升(不支持)發行說明。

磚7.1運行時的基因組

2020年7月21日

磚7.1運行時的基因組學是建立在磚上運行7.1和帶來以下新的特點:

  • 發瘋的轉換

  • 重塑GloWGR輸出功能

  • RNASeq輸出未配對的比對

詳情,請參閱完成磚7.1運行時的基因組學(不支持)發行說明。

磚連接7.1(公共預覽版)

2020年7月17日,

磚連接7.1現在公共預覽。

IP訪問列表API更新

2020年7月15至21日:3.24版

以下IP訪問列表API屬性改變了:

  • updator_user_idupdated_by

  • creator_user_idcreated_by

Python筆記本現在支持多種輸出每個細胞

2020年7月15至21日:3.24版

Python筆記本現在支持多種輸出每個細胞。這意味著你可以擁有任意數量的顯示、displayHTML,或在一個細胞打印語句。利用能夠查看原始數據和情節在同一單元格中,或全部輸出,成功之前你遇到一個錯誤。

在一個細胞多個輸出

該功能需要磚運行時的7.1或以上,在磚7.1運行時的默認情況下是禁用的。使它通過設置spark.databricks.workspace.multipleResults.enabled真正的

細胞並排視圖筆記本代碼和結果

2020年7月15至21日:3.24版

新並排筆記本旁邊顯示選項允許您查看代碼和結果。這顯示選擇加入“標準”選項(原名“代碼”)和“結果”選項。

並排視圖

暫停工作時間表

2020年7月15至21日:3.24版

現在工作日程安排暫停Unpause按鈕使它容易暫停和恢複工作。現在你可以更改工作安排沒有額外的工作運行開始時進行更改。當前運行或運行由現在運行不受影響。有關詳細信息,請參見暫停和恢複工作進度

喬布斯API端點驗證運行ID

2020年7月15至21日:3.24版

工作/運行/取消工作/運行/輸出現在驗證API端點run_id參數是有效的。無效的參數這些API端點返回HTTP狀態碼400,而不是代碼500。

SQL在筆記本自動格式

2020年7月15至21日:3.24版

你現在可以格式化SQL筆記本電池從鍵盤快捷鍵命令上下文菜單,和筆記本電腦編輯菜單(選擇編輯>格式SQL細胞)。SQL格式更容易閱讀和維護代碼。它適用於SQL筆記本以及%的sql細胞。

SQL格式筆記本電池

支持r5.8xlarge和r5.16xlarge實例

2020年7月15至21日:3.24版

外加r5.8xlarge r5.16xlarge,磚現在支持的完整家庭的r5 EC2實例類型。

使用密碼訪問控製配置,用戶需要使用SSO登錄或使用令牌驗證(公共預覽版)

2020年7月1 - 9日:3.23版

如果你的磚工作區使用單點登錄(SSO),現在可以分配密碼權限,防止管理用戶使用自己的用戶名和密碼登錄到磚UI。你也可以否認非管理用戶和組的能力驗證的磚REST api的用戶名和密碼,強迫他們使用個人訪問令牌。密碼訪問控製要求保費計劃或以上

看到密碼權限

可再生的順序安裝Maven和凹口庫

2020年7月1 - 9日:3.23版

磚現在流程Maven和凹口庫的順序安裝在集群。

控製用戶的個人訪問令牌,令牌管理API(公共預覽版)

2020年7月1 - 9日:3.23版

現在磚管理員可以使用令牌管理API來管理用戶數據磚個人訪問令牌:

  • 監控和撤銷用戶的個人訪問令牌。

  • 控製未來的一生令牌在你的工作區。

  • 控製哪些用戶可以創建和使用令牌。

看到管理個人訪問令牌

Customer-managed VPC部署(公共預覽)現在可以使用區域VPC端點

2020年7月8日:3.23版

如果你參與customer-managed VPC預覽與集群安全連接,現在您可以配置您的VPC隻使用更為直接,區域VPC AWS服務端點安全連接和降低成本而AWS全球端點。有關詳細信息,請參見區域端點

集群工作節點之間加密流量(公共預覽版)

2020年7月7日

在磚,用戶查詢或轉換發送給您的集群在一個加密的通道。集群工作節點之間的數據交換,然而,在缺省情況下是不加密的。如果您的環境要求的數據進行加密,在休息還是在運輸途中,你可以創建一個init腳本配置您的集群加密交通工作者節點之間,使用AES 128位加密TLS 1.2連接。這個節點間加密功能需要企業計劃。聯係你的磚賬戶代表更多的信息。

看到集群工作節點之間的加密流量

訪問控製表支持在所有賬戶保費計劃(公共預覽版)

2020年7月1 - 9日:3.23版

表訪問控製表(acl),它允許您以編程方式grant和revoke從Python和SQL訪問您的數據,現在支持在公共預覽所有賬戶的保費計劃或以上

看到蜂巢metastore表訪問控製(遺留)

我憑據支持透傳所有賬戶保費計劃(公共預覽版)

2020年7月1 - 9日:3.23版

我憑證透傳,它允許您進行身份驗證自動從磚S3 bucket集群使用你的身份登錄到磚,現在支持在公共預覽所有賬戶的保費計劃或以上

看到最初發行通知憑據透傳(遺留)

恢複將筆記本電池

2020年7月1 - 9日:3.23版

您現在可以恢複筆記本電池已經減少使用(Z鍵盤快捷鍵或通過選擇編輯>撤銷減少細胞。這個功能類似於取消刪除細胞。

分配的工作可以管理非管理用戶權限

2020年7月1 - 9日:3.23版

你現在可以分配到非管理用戶和組可以管理工作許可。這個權限級別允許用戶在工作中管理所有設置,包括分配權限、改變所有者,和改變集群配置(例如,添加庫和修改集群規範)。看到工作訪問控製

非管理磚用戶可以查看用戶名使用SCIM API和過濾

2020年7月1 - 9日:3.23版

非管理用戶現在可以查看用戶名和過濾用戶使用的用戶名SCIM /用戶終端