01-11-202302:15我
你好,我想了解磚JAR基於工作流的任務。我可以解釋JAR是類似spark-submit運行基於集群?在日誌中,我希望看到的
com spark-submit——類。xyz, num-executors 4
等等,然後還有一個任務類型介紹了最近我認為——火花提交任務類型。如果我們有一個JAR來執行,並引發提交任務類型和JAR類型隱式相似或不同的工作嗎?
01-11-202302:17點
嗨,你能通過https://docs.m.eheci.com/workflows/jobs/how-to-use-jars-in-workflows.html讓我們知道如果這可以幫助嗎?
01-12-202304:25我
你好,我試著用了工作流> CreateTask > JarTaskType > >工作UploadedMyJAR類和JobCluster創建和測試這一任務。這個罐子讀取一些表作為輸入,做一些轉換和輸出寫一些其他表。我想知道這個罐子可以解釋為任務類型
com spark-submit——類。xyz - num-executors
工作嗎?因為我在尋找這樣的條目在日誌文件中,但不能找到任何。JAR任務類型的工作原理,如何是我的實際問題嗎?
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。