問題而重新啟動流DLT管道——PUBSUB

[ajaypanday6781]

我不能重新啟動我們的流DLT的管道“__tmp_path_dir”數字格式錯誤,我用發布—訂閱源流媒體。

任何解決方案將幫助-

# pusub #磚

[胺]

你好,

管道內似乎有一個異常的代碼。

你能提供管道的部分源代碼嗎?

[ajaypanday6781]

嗨@Amine,

我認為沒有問題的代碼,但仍是將下麵的代碼——的快照

[Kaniz]

嗨@ajaypanday6781,你遇到的“__tmp_path_dir”數字格式錯誤可能是由於陳舊的底層文件磁盤高速緩存或失蹤。你可以試著解決這個問題通過執行以下步驟:

1。磁盤高速緩存失效:可以使磁盤高速緩存無效手動重新啟動集群。這將刷新過期磁盤緩存和可能解決你的問題。

2。檢查丟失的文件:錯誤可能是由於流源檢查點目錄丟失的文件。這個目錄包含重要的流的默認選項;如果文件是缺失的,流不可能重新啟動。驗證所有必要的文件。

3所示。檢查模式變化:如果源數據的模式發生了變化,您可能需要啟用模式推理與自動加載程序。這將自動重啟你的流當源數據的模式發生變化。

[ajaypanday6781]

嗨@Kaniz,

我用從PUBSUB流DLT獲取數據,相關的問題不是檢查點的DLT自動維護所有檢查點或無效的磁盤緩存我重啟DLT管道每次都創建一個新的集群。也,我有檢查,沒有發現模式變化在我的數據。

我正常集群上運行相同的代碼PUBSUB流的工作好這個問題隻有通過DLT當我運行它。