幫助
pjp94
貢獻者
自 ‎11-30-2021
‎07-05-2023

用戶數據

  • 16的帖子
  • 0解決方案
  • 2榮譽給
  • 8榮譽收到

用戶活動

在多個節點上運行threadpool

07-05-2023
我跑一個雙重多進程和多線程解決方案之前在python中使用多處理和並發期貨python模塊。然而,由於多處理模塊隻有司機節點上運行,我必須用sc.parallelize……

數據庫連接失敗

01-06-2023
出於某種原因,我和dbconnect失敗沒能解決問題。我是連接到一個企業服務器。我收到了下麵的錯誤(我相信)現在都解決了。我定義了PYSPARK_DRIVER_PYTHON和PYSPARK_PYTHON v……

調用一個python函數(def)磚

12-05-2022
不知道我缺少一些東西,但運行一個任務之外的python函數運行更快比在一個函數執行相同的任務。有什麼我錯過火花如何處理功能?1)def任務(x): y = dostuf……

錯誤——遠程RPC客戶端沒有關聯。可能由於容器超過閾值,或網絡問題。檢查驅動程序日誌來警告消息。

09-19-2022
我得到以下錯誤當試圖運行多線程末期——失敗。我猜這是有關內存/工人配置。我見過一些解決方案涉及修改的工人數量或CPU在集群上——然而,n…

DBFS和三角洲湖之間的區別嗎?

01-28-2022
想潛水/更深層次的解釋不同。當我寫一個表下麵的代碼:spark_df.write.mode .saveAsTable(“覆蓋”)(“db.table”)創建的表和數據中可以查看選項卡。它還可以發現在一些DBF……
查看更多
榮譽給
Baidu
map