我們可以設置為例:
spark.conf.set (“aaa.test.junk。配置的,99999),然後運行spark.conf.get (“aaa.test.junk.config”)將返回一個值。
這個問題發生在錯誤地設置一個類似匹配屬性。
spark.conf.set (“spark.sql.shuffle。分區',999)= = >不落後的年代
實際的財產:‘spark.sql.shuffle.partition年代”= = >有一個培訓“年代”
運行spark.conf.get (“spark.sql.shuffle.partition”)將返回一個值= = >不落後的年代
我以為我可以運行getAll()驗證,但getAll()可能不會返回屬性顯式地定義在一個筆記本。
有辦法檢查我是否用作配置參數實際上是有效的嗎?我沒有看到任何錯誤消息