07-07-202222點
從一個筆記本我可以導入log4j日誌記錄器cs和寫日誌一樣:
log4jLogger = sc._jvm.org.apache.log4j
記錄器= log4jLogger.LogManager.getLogger (__name__)
LOGGER.info(“記錄器pyspark腳本初始化”)
但這並不表管道在三角洲工作生活。我想能夠發布調試消息管道運行時出現的日誌。我怎樣才能記錄器的DLT管道腳本?
07-11-202205:46我
嗨@Ben鮑嘉,每個管道的事件日誌存儲在一個三角洲DBFS表。您可以查看事件日誌條目在三角洲地區的生活表用戶界麵三角洲住表API,或者直接查詢δ表。
這文章重點是三角洲表查詢。
的例如筆記本電腦包括本文中討論的查詢,可以用來探索三角洲生活事件日誌表。
本文中的示例使用JSON SQL函數可以在磚運行時8.1或更高版本。
07-11-202206:43我
謝謝你Kaniz。我看過那篇文章,但它沒有解決如何寫日誌條目就是我努力的方向。
記錄自己的日誌消息將我直接寫“event_log_raw”?磚做引擎蓋下麵的是什麼?
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。