蜂巢版本升級後Azure磚從6.4(2)火花9.1(3)火花

[jeffreym9]

我的Azure磚從6.4到9.1的升級讓我使用Spark3。據我所知,蜂巢必須升級到2.3.7版本以及討論:

https://community.m.eheci.com/s/question/0D53f00001HKHy2CAH/how-to-upgrade-internal-hive-metadata..。

我已經試著不給這些選項和繼續使用蜂巢0.13我Spark3運行應用程序,一切都好。這是必須升級蜂巢metastore 2.3.7 Spark3運行程序?導致一切都發現沒有添加:

spark.sql.hive.metastore。2.3.7版本spark.sql.hive.metastore。瓶內裝式

[Kaniz]

你好@jeffreym9!我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在社區中有一個回答你的問題。否則我將盡快給你回電。謝謝。

[Atanu]

這裏提到@Jeffrey Mak所有支持的版本https://docs.microsoft.com/en-us/azure/databricks/data/metastores/external-hive-metastore此外,我不認為裝入的。

• 對於所有其他蜂巢版本,Azure磚建議您下載metastore罐子和設置配置
• spark.sql.hive.metastore.jars
• 指使用中描述的程序下載的jar下載metastore罐子,指向他們。

[匿名]

@Jeffrey Mak - Atanu為你解決這個問題的回答嗎?如果是的,你會很高興它標記為最好,其他成員可以找到解決方案更快嗎?

[jeffreym9]

我問Datatricks 9.1版。我跟隨給定的url (https://docs.microsoft.com/en-us/azure/databricks/data/metastores/external-hive-metastore)。你介意讓我知道表中提及磚9.1支持的蜂巢版本?