Linux下MongoDB的數據遷移方法

Linux下MongoDB數據遷移的常見方法

一、使用mongodump與mongorestore（整庫/批量集合遷移推薦）

適用場景：需要遷移整個數據庫或大量集合，追求遷移效率的場景。
操作步驟：

1. 源服務器備份數據：使用mongodump工具導出數據為BSON格式（MongoDB原生二進制格式），命令示例：

   mongodump --host 源服務器IP --port 27017 --db 目標數據庫名 --out /path/to/backup目錄
   

   說明：--host和--port指定源MongoDB地址；--db指定要備份的數據庫；--out指定備份文件存儲路徑。
2. 傳輸備份文件到目標服務器：使用scp（安全拷貝）工具將備份目錄傳輸到目標服務器，命令示例：

   scp -r /path/to/backup 目標服務器用戶名@目標服務器IP:/path/to/destination目錄
   

3. 目標服務器恢復數據：使用mongorestore工具將備份數據導入目標MongoDB，命令示例：

   mongorestore --host 目標服務器IP --port 27017 --db 目標數據庫名 /path/to/destination/備份目錄/目標數據庫名
   

   說明：若目標數據庫已存在，mongorestore會合并數據（可通過--drop參數先刪除目標數據庫，謹慎使用）。

二、使用mongoexport與mongoimport（單集合/結構化數據遷移推薦）

適用場景：僅需遷移單個集合，或需要將數據轉換為JSON/CSV格式（便于跨系統處理）的場景。
操作步驟：

1. 源服務器導出集合數據：使用mongoexport工具導出指定集合為JSON或CSV格式，命令示例（導出為JSON）：

   mongoexport --host 源服務器IP --port 27017 --db 目標數據庫名 --collection 目標集合名 --out /path/to/exported_file.json
   

   說明：--collection指定要導出的集合；--out指定導出文件路徑。若需導出為CSV，需添加--type=csv和--fields 字段1,字段2參數。
2. 傳輸導出文件到目標服務器：使用scp工具將導出文件傳輸到目標服務器，命令同步驟二中的傳輸命令。
3. 目標服務器導入集合數據：使用mongoimport工具將數據導入目標MongoDB，命令示例（導入JSON）：

   mongoimport --host 目標服務器IP --port 27017 --db 目標數據庫名 --collection 目標集合名 --file /path/to/exported_file.json
   

   說明：若目標集合已存在，mongoimport會追加數據（可通過--drop參數先刪除目標集合）。

三、使用rsync同步數據目錄（實時/增量遷移推薦）

適用場景：需要實時同步數據，或遷移過程中仍有數據寫入的場景（如生產環境熱遷移）。
前提條件：源服務器和目標服務器的MongoDB均配置為復制集（Replica Set），確保數據一致性。
操作步驟：

1. 配置復制集：若未配置，需修改源服務器和目標服務器的mongod.conf文件，添加復制集配置（如replication: replSetName: "rs0"），然后重啟MongoDB服務。
2. 同步數據目錄：使用rsync工具同步源服務器的MongoDB數據目錄（默認/var/lib/mongodb或/data/db）到目標服務器，命令示例：

   rsync -avz --delete --progress 源服務器用戶名@源服務器IP:/var/lib/mongodb/ 目標服務器用戶名@目標服務器IP:/var/lib/mongodb/
   

   說明：-avz表示歸檔模式、顯示進度、壓縮傳輸；--delete表示刪除目標目錄中源目錄不存在的文件（保持完全同步）；--progress顯示傳輸進度。
3. 重啟目標服務器MongoDB：同步完成后，重啟目標服務器的MongoDB服務以加載同步的數據，命令示例：

   sudo systemctl restart mongod
   

   驗證：通過mongo shell連接目標服務器，檢查數據是否同步。

四、遷移注意事項

1. 版本兼容性：確保源服務器與目標服務器的MongoDB版本兼容（如3.6→4.0→5.0，避免跨大版本直接遷移，建議逐步升級）。
2. 權限準備：執行備份、恢復操作的用戶需具備相應權限（如backup、restore角色，或root用戶）。
3. 數據一致性：遷移前停止源服務器的寫入操作（或使用復制集保證數據同步），避免遷移過程中數據丟失。
4. 網絡帶寬：大數據量遷移時，建議使用高速網絡（如萬兆以太網），或選擇低峰期遷移以減少對業務影響。
5. 遷移驗證：遷移完成后，通過mongo shell連接目標服務器，執行查詢語句（如db.collection.find().count()）驗證數據完整性和一致性。