問題
您正在使用Databricks Connect客戶端與Databricks Runtime 6.4,並收到一條錯誤消息,說明客戶端不支持集群。
集群運行的服務器版本是“dbr-6.4”,但是這個客戶端隻支持Set(dbr-5.5)。您可以在https://pypi.org/project/databricks-connect/#history上找到客戶端版本列表,並使用' pip install -U databicks -connect=='安裝正確的客戶端版本。例如,要安裝最新的5.1版本,使用' pip install -U databicks -connect==5.1.* '。要忽略此錯誤並繼續,請設置DEBUG_IGNORE_VERSION_MISMATCH=1。
導致
對Databricks Runtime 6.4進行了改進,該改進與Databricks Connect客戶端6.4.1及以下版本不兼容。
解決方案
將Databricks Connect客戶端升級到6.4.2版本。
按照文檔設置客戶端(AWS|Azure),確保將databricks-connect取值到6.4.2。
PIP install databicks -connect==6.4.2