10-13-202203:16我
我得到這個錯誤當試圖執行並行的奴隸從Pyspark筆記本“大師筆記本”。
注1:我使用相同的類、函數、集群、憑證為平行的另一個用例的筆記本在同一個磚實例和效果好。
注2:命令沒問題,如果“筆記本大師”從一份工作,雖然它返回上麵的錯誤當筆記本手動啟動。
到目前為止在文檔或論壇上找不到類似的錯誤。
10-18-202205:05我
人工養殖珍珠,是問題:
“PySpark內,有一個限製的大小Python udf可以構造自大型udf發送廣播變量”。
10-18-202206:19我
你好,
我添加一個注意:沒有UDF的“筆記本大師”和“奴隸筆記本”;命令沒問題,如果“筆記本大師”從一份工作,雖然它返回上麵的錯誤當筆記本手動啟動。
11-20-2022下午11:01
嗨@carlosancassani
希望一切都好!
隻是想檢查如果你能解決你的問題,你會很高興分享解決方案或答案標記為最佳嗎?其他的請讓我們知道如果你需要更多的幫助。
我們很想聽到你的聲音。
謝謝!
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。