從三角洲湖遷移數據到RDS MySQL和ElasticSearch

[AmanSehgal]

有機製(DMS)讓數據從RDS三角洲湖拚花和存儲數據的格式,但有可能扭轉在AWS的嗎?

我想發送數據從數據湖MySQL RDS表以批處理模式。

下一步是ElasticSearch發送數據。

[Hubert_Dudek1]

@Aman Sehgal Azure,對於這樣的遷移,我使用Azure數據工廠。這隻是表複製和數據複製(所以沒有索引)。在AWS等效AWS膠但我沒有經驗在實踐中。在Azure數據工廠,有一個連接器S3和Mysql,這樣你可以試試用多重雲的方法。

最後,您可以編寫腳本在磚上。如果不是一次性複製但普通,我可能坐著寫所有的邏輯——名單表、創建表,在蜂巢metastore注冊表,它們之間複製數據等。

[Kaniz]

嗨@Aman Sehgal,隻是一個友好的後續。你還需要幫助,或@Hubert杜德克的年代響應幫助你找到解決方案了嗎?請讓我們知道。

[AmanSehgal]

@Kaniz Fatma和@Hubert杜德克MySQL RDS -寫作相對簡單。我想辦法向Elasticsearch出口數據

[Kaniz]

謝謝你的快速更新@Aman Sehgal。讓我們為你找到答案。