取消
顯示的結果
而不是尋找
你的意思是:

Pyspark安裝問題

_r_vind1199
新的貢獻者二世

當我試著開始在pycharm pyspark會話。我拋出這個錯誤”RuntimeError (“Java網關進程退出之前發送端口號”)。有人能幫我解決這個問題嗎?

1接受解決方案

接受的解決方案

Aashita
貢獻者三世
貢獻者三世

@Aravind一,你安裝和版本的依賴關係是什麼?

安裝pyspark + openjdk

% pip安裝pyspark = = 2.4.8 ! apt-get安裝openjdk-8-jdk-headless qq > / dev / null

構建火花會話

從pyspark。sql進口SparkSession火花= SparkSession。構建器\ .appName(“實踐”)\ .getOrCreate ()

注意:

Scala火花運行在Java 8/11, 2.12/2.13, Python 3.6 +和+ 3.5 R。

Python 3.6支持火花3.2.0棄用。

Java 8 version 8之前u201支持火花3.2.0棄用。

Scala API,引發3.2.1之上使用Scala 2.12。您將需要使用一個兼容的Scala版本(2.12.x)。

https://spark.apache.org/docs/latest/

在原帖子查看解決方案

4回複4

Aashita
貢獻者三世
貢獻者三世

@Aravind一,你安裝和版本的依賴關係是什麼?

安裝pyspark + openjdk

% pip安裝pyspark = = 2.4.8 ! apt-get安裝openjdk-8-jdk-headless qq > / dev / null

構建火花會話

從pyspark。sql進口SparkSession火花= SparkSession。構建器\ .appName(“實踐”)\ .getOrCreate ()

注意:

Scala火花運行在Java 8/11, 2.12/2.13, Python 3.6 +和+ 3.5 R。

Python 3.6支持火花3.2.0棄用。

Java 8 version 8之前u201支持火花3.2.0棄用。

Scala API,引發3.2.1之上使用Scala 2.12。您將需要使用一個兼容的Scala版本(2.12.x)。

https://spark.apache.org/docs/latest/

_r_vind1199
新的貢獻者二世

3.2.1 @Aashita Ramteke, Pyspark版本

請替換版本安裝python時依賴2.4.8 3.2.1 . .它應該工作。謝謝。

Kaniz
社區經理
社區經理

嗨@Aravind,你試過的所有步驟所顯示@Aashita Ramteke嗎?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map