取消
顯示的結果
而不是尋找
你的意思是:

如何加快dbx發射——資產”

agagrins
新的貢獻者三世

你好,

我想遵循的測試工作流程

' ' '

美元——assets-only dbx部署測試

dbx發射測試——在資產跟蹤美元——include-output stdout

' ' '

但是我發現周轉時間很長,即使一個實例池。

“部署。yaml的樣子

' ' '

環境:

默認值:

工作流程:

名稱:“測試”

任務:

——task_key:“主要”

new_cluster:

spark_version:“11.3.x-scala2.12”

num_workers: 1

instance_pool_id:“實例池:/ / * * * *”

init_scripts:

- dbfs:

目的地:dbfs: / / * * * * / init.sh

python_wheel_task:

package_name:“foo”

entry_point:“酒吧”

參數:[

”——配置文件”、“文件:保險絲:/ / conf /任務/ bar.yaml”,

]

' ' '

“init。sh”隻是一個“pip安裝”。

摘錄一些日誌,顯示事情花多長時間

' ' '

[dbx][2023-02-09 10:41:57.487]啟動工作流

[dbx] [2023-02-09 10:42:01.389] URL運行:https://dbc-

[dbx][2023-02-09 10:47:37.229]完成跟蹤運行id ....

' ' '

所以大約需要5分鍾設置新環境!

有人如何加快事情的想法?

3回複3

agagrins
新的貢獻者三世

哦,不,現在我們得到機器人在這裏聊天嗎?

ErinArmistead
新的貢獻者二世

哈哈也許吧。但是是的,如果你不清楚許多文章種類,你可以看看https://writinguniverse.com/essay-types/process-essays/網站需要考慮的幾個論文格式,可以幫助你完成你的論文寫作工作。

tonkol
新的貢獻者二世

你好,我沒有解決方案,實際上我剛剛注冊打開一個非常相似的票,當看到你的。

根據我的實驗得到一個已經運行從池中VM(*事件之間:創造- INIT_SCRIPTS_STARTED)可以采取任何5秒至5分鍾。目前尚不清楚為什麼。

其實快不使用實例池根據我的實驗。

另外如果能至少全球ini腳本將被應用在vm啟動時池(通過一個可以做一些耗時的初始化步驟獨立工作的開始)。

既然你reltively長時間沒有得到回答,我猜一個必須接受,隻是簡單地減緩.....:' (

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map