如何用Linux MinIO進行數據遷移

以下是使用Linux MinIO進行數據遷移的常用方法，基于MinIO客戶端工具mc操作：

一、同網段/可直連集群遷移

1. 全量遷移（自動創建目標Bucket）

# 設置源和目標集群別名  
mc alias set srcminio http://源集群IP:9000 用戶名 密碼  
mc alias set destminio http://目標集群IP:9000 用戶名 密碼  

# 遷移所有數據（含自動創建Bucket）  
mc mirror srcminio/ destminio/  

• 說明：/表示同步所有Bucket，目標集群會自動創建不存在的Bucket。

2. 單Bucket遷移

# 遷移指定Bucket（目標Bucket需提前創建）  
mc mirror srcminio/源Bucket destminio/目標Bucket  

• 覆蓋重名文件：添加--overwrite參數。

二、跨網段/非直連集群遷移（需中間存儲）

1. 導出到本地再導入

# 在源集群服務器導出Bucket到本地目錄  
mc alias set srcminio http://源集群IP:9000 用戶名 密碼  
mc mirror srcminio/源Bucket /本地臨時目錄/  

# 壓縮并傳輸到目標服務器（如scp）  
tar -czvf bucket.tar.gz /本地臨時目錄/  
scp bucket.tar.gz 目標服務器IP:/臨時目錄/  

# 在目標服務器導入到MinIO  
mc alias set destminio http://目標集群IP:9000 用戶名 密碼  
mc mirror /臨時目錄/ destminio/目標Bucket  

• 適用場景：無法直連的集群，需通過本地或中轉服務器過渡。

三、實時同步（持續監控變更）

# 持續同步源集群數據到目標集群（自動處理新增/修改）  
mc mirror --watch srcminio/ destminio/  

• 后臺運行：添加nohup或&實現后臺同步，日志可重定向到文件。

四、注意事項

1. 權限配置：確保mc使用的用戶名/密碼具有源集群的讀取權限和目標集群的寫入權限。
2. 網絡連通性：非直連場景需確保中間存儲或網絡通道可達。
3. 大文件處理：mc會自動分片傳輸大文件，避免網絡中斷。
4. 版本一致性：建議源和目標集群版本一致，避免兼容性問題。

參考來源：