取消
顯示的結果
而不是尋找
你的意思是:

發送自定義日誌從筆記本AWS監測

Murthy1
因素二世

我想把一些自定義日誌(在Python)從我的磚筆記本AWS監測。

例如:

df = spark.read.json (“.......................”)

logger.info(“成功吸收json數據”)

有人成功地這樣做過嗎?感謝你的幫助。提前謝謝!

1接受解決方案

接受的解決方案

Debayan
尊敬的貢獻者三世
尊敬的貢獻者三世
5回複5

Debayan
尊敬的貢獻者三世
尊敬的貢獻者三世

嗨,你可以整合,請參考:https://aws.amazon.com/blogs/mt/how-to-monitor-databricks-with-amazon-cloudwatch/也可以配置審計日誌記錄從AWS S3和重定向到監測。,請參考:https://aws.amazon.com/blogs/mt/how-to-monitor-databricks-with-amazon-cloudwatch/

你好@Debayan穆克吉,

謝謝你的回複,這是有幫助的。

從s3日誌文件重定向到cloudwatch——我可以使用boto3(例如:https://stackoverflow.com/questions/59147344/sending-emr-logs-to-cloudwatch)

但是我們有本地與AWS的集成監測嗎?

Debayan
尊敬的貢獻者三世
尊敬的貢獻者三世
歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map