磚有maven存儲庫下載jar ?

[User16869510359]

使用OSS jar導致運行時類路徑問題總是在磚的工作。同樣的工作細EMR /本地工作。

[User16869510359 · Accepted solution]

磚不主辦的罐子的maven存儲庫。OSS的罐子可以用來編譯應用程序。不應使用OSS jar的執行時間。即:應用程序jar不應該胖罐,而是薄jar。

如果內部引發使用api,那麼有可能這些類的磚版本都有不同的方法,和編譯應用程序對OSS jar會導致類路徑問題。在這樣的場景中可用的罐子在集群上應該來自你的本地和用於編譯。jar可以在:

https://docs.m.eheci.com/dev-tools/databricks-connect.html intellij-scala-or-java

[mj2022]

我後https://docs.m.eheci.com/dev-tools/databricks-connect.html intellij-scala-or-java獲得spark-avro jar從磚的定製from_avro方法使用卡夫卡模式注冊表,但是我不能夠找到spark-avro jar使用磚連接. .我們需要使用編譯jar。任何想法為什麼spark-avro jar丟失當我們罐子使用“databricks-connect get-jar-dir”?