如何調用幾個孩子從主筆記本平行筆記本嗎?

[andrew0117]

計劃使用dbutils.notebook.run()調用所有的孩子在主筆記本,筆記本但順序執行。

[Vidula_Khanna]

你好@andrew李

很高興認識你,謝謝你的問題!

看看你的同行在社區中有一個回答你的問題。否則bricksters能早日回到你身邊。

謝謝

[UmaMahesh1 · Accepted solution]

你好@andrew李

您可以使用scala或python構造使用線程和期貨。

你可以下載並導入從這個鏈接筆記本存檔。它有功能筆記本平行運行。

https://docs.m.eheci.com/notebooks/notebook-workflows.html run-multiple-notebooks-concurrently

之後,根據你的喜好,設置並行運行筆記本使用的數量numNotebooksInParallel變量parallel-notebooks筆記本。

一旦完成,你可以叫parallelNotebooks函數來運行您的筆記本平行。關於怎麼做的例子,請參考並發的筆記本筆記本電腦在下載檔案。

小心不要撞你的驅動提供了太多的平行的筆記本。

希望這可以幫助. .歡呼。

[andrew0117]

非常感謝!

通過使用線程,所有工作運行子筆記本共享同一集群的主人筆記本運行嗎?

[UmaMahesh1]

你好@andrew李

是的,他們做的集群上運行主筆記本運行。

具體地說,我們是多線程的火花的司機期貨支持並行作業提交。

你可以查看更多關於線程和期貨更深層次的理解。

希望這個有幫助。做上麵的標記為最佳答案如果它幫助。

歡呼。