取消
顯示的結果
而不是尋找
你的意思是:

如何寫日誌條目從三角洲住表管道。

159312年
新的貢獻者三世

從一個筆記本我可以導入log4j日誌記錄器cs和寫日誌一樣:

log4jLogger = sc._jvm.org.apache.log4j

記錄器= log4jLogger.LogManager.getLogger (__name__)

LOGGER.info(“記錄器pyspark腳本初始化”)

但這並不表管道在三角洲工作生活。我想能夠發布調試消息管道運行時出現的日誌。我怎樣才能記錄器的DLT管道腳本?

2回答2

Kaniz
社區經理
社區經理

嗨@Ben鮑嘉,每個管道的事件日誌存儲在一個三角洲DBFS表。您可以查看事件日誌條目在三角洲地區的生活表用戶界麵三角洲住表API,或者直接查詢δ表。

文章重點是三角洲表查詢。

例如筆記本電腦包括本文中討論的查詢,可以用來探索三角洲生活事件日誌表。

本文中的示例使用JSON SQL函數可以在磚運行時8.1或更高版本。

159312年
新的貢獻者三世

謝謝你Kaniz。我看過那篇文章,但它沒有解決如何日誌條目就是我努力的方向。

記錄自己的日誌消息將我直接寫“event_log_raw”?磚做引擎蓋下麵的是什麼?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map