08-01-202207:15我
我使用磚在AWS上。我們的集群通常掛起狀態5 - 8分鍾後創建的。我想找出為什麼(ec2實例配置?碼頭工人圖像下載很慢?…?)。集群日誌不夠有用的因為我隻看到init腳本執行的時間戳在我們的案例中是~ 2秒。
我想改進啟動時間。我怎麼能找出花這麼多時間來啟動集群?有一些日誌記錄或事件發射,我可以閱讀和分析?
08-02-2022上午06:27
不幸的是,這不是在UI上或通過API可用。我們得到這個信息隻能從後端日誌。如果你覺得這些信息所需的一些分析,我建議增加一個功能要求這個門戶通過我們的想法。
https://docs.m.eheci.com/resources/ideas.html
在原帖子查看解決方案
08-01-202203:51點
嗨@Sergey Ivanychev,你檢查是否有遺留在DBFS init腳本加載嗎?檢查任何腳本在dbfs: /磚/ init。
08-02-202201:34我
不,沒有什麼
08-02-202204:15我
嗨@Sergey Ivanychev集群開始時,你可以看到狀態計算頁麵。懸停鼠標指針指向左邊的綠色旋轉圓集群的名稱。它會給一個通知在集群上正在發生的事情。當我抓住了截圖,集群是尋找新的節點。這可能會幫助你得到一些見解為什麼有一個延遲。
08-02-2022上午05:06
這聽起來有希望,謝謝!這是數據可以通過API或記錄任何地方嗎?
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。