你好,
您可以使用自動裝卸機逐步加載所有文件。
看看這個:
https://learn.microsoft.com/en-us/azure/databricks/ingestion/auto-loader/
它會自動推斷出模式和處理模式演化(你也可以決定營救損壞記錄):
https://learn.microsoft.com/en-us/azure/databricks/ingestion/auto-loader/schema schema-inference
下麵是一些常見的數據加載模式的例子:
https://learn.microsoft.com/en-us/azure/databricks/ingestion/auto-loader/patterns