mongodb backup and restore

一、mongodb的冷備

mongodb的冷備就是：復制庫的相關文件。因此在冷備前，要關閉服務器，本全中使用平滑關閉server的命令。

>use admin  
>db.shutdownServer() 
或者可以通過fsync方式使MongoDB將數據寫入緩存中，然后再復制備份
>use admin  
>db.runCommand({"fsync":1,"lock":1})

鎖庫后執行插入數據命令，發現無任何反應。備份完后，要解鎖（防止這個時候停電或其它原因，導致未緩存中的數據丟失）。

>use admin  
>db.$cmd.sys.unlock.findOne()  
>db.currentOp()

如果currentOp 只返回{"inprog":[]}結果，說明解鎖成功。 解鎖后，數據才會成功寫入數據庫。

解鎖也可以使用以下命令：

>use admin
>db.fsyncUnlock()

二、mongodb的熱備

    可以在不停止服務的情況下，使用MongoDB提供的兩個工具來實現備份和恢復。這個兩個工具在MongoDB的bin目錄下可以看到：mongodump/mongorestor

1、常用命令格

mongodump -h IP --port PORT -u UserName -p Password -d DB_name -c Collection_Name  --authenticationDatabase AuthDB_name -o BackupPath [--gzip]

    如果不指定用戶，可以去掉-u和-p；省略-h，默認導出本機的數據庫；省略- -port默認端口27017；省略-d默認導出所有數據庫。

2、導出所有數據庫

[root@localhost mongodb]# mongodump -h 127.0.0.1 -o /home/user01/backup/

3、導出指定數據庫

[root@localhost mongodb]# mongodump -h 192.168.1.108 -d tank -o /home/user01/backup

三、mongorestore還原數據庫

1、常用命令格式

mongorestore -h IP --port PORT -u UserName -p Password -d DB_Name -c Collection_Name --drop BackupPath_Or_FileName

    --drop的意思是，先刪除所有的記錄，然后恢復。

2、恢復所有數據庫到mongodb中

[root@localhost mongodb]# mongorestore /home/user01/backup/  #這里的路徑是所有庫的備份路徑

3、還原指定的數據庫

[root@localhost mongodb]# mongorestore -d tank /home/user01/backup/tank/  #tank這個數據庫的備份路徑 
[root@localhost mongodb]# mongorestore -d tank_new /home/user01/backup/tank/  #將tank還有tank_new數據庫中

四、mongoexport導出表，或者表中部分字段

1、常用命令格式

mongoexport -h IP --port 端口 -u 用戶名 -p 密碼 -d 數據庫 -c 表名 -f 字段 -q 條件導出 --csv -o 文件名

    上面的參數好理解，重點說一下：

-f    導出指字段，以字號分割，-f name,email,age導出name,email,age這三個字段

-q    可以根查詢條件導出，-q '{ "uid" : "100" }' 導出uid為100的數據

--csv 表示導出的文件格式為csv的，這個比較有用，因為大部分的關系型數據庫都是支持csv，在這里有共同點

2、導出整張表

[root@localhost mongodb]# mongoexport -d tank -c users -o /home/user01/backup/tank/users.dat

3、導出表中部分字段

[root@localhost mongodb]# mongoexport -d tank -c users --csv -f uid,name,sex -o tank/users.csv

4、根據條件敢出數據

[root@localhost mongodb]# mongoexport -d tank -c users -q '{uid:{$gt:1}}' -o tank/users.json

五、mongoimport導入表，或者表中部分字段

1、常用命令格式

    1) 還原整表導出的非csv文件

mongoimport -h IP --port 端口 -u 用戶名 -p 密碼 -d 數據庫 -c 表名 --upsert --drop 文件名

    重點說一下--upsert，其他參數上面的命令已有提到，--upsert 插入或者更新現有數據

    2) 還原部分字段的導出文件

mongoimport -h IP --port 端口 -u 用戶名 -p 密碼 -d 數據庫 -c 表名 --upsertFields 字段 --drop 文件名

    --upsertFields根--upsert一樣

    3) 還原導出的csv文件

mongoimport -h IP --port 端口 -u 用戶名 -p 密碼 -d 數據庫 -c 表名 --type 類型 --headerline --upsert --drop 文件名

    上面三種情況，還可以有其他排列組合的。

2、還原導出的表數據

[root@localhost mongodb]# mongoimport -d tank -c users --upsert tank/users.dat

3、部分字段的表數據導入

[root@localhost mongodb]# mongoimport -d tank -c users  --upsertFields uid,name,sex  tank/users.dat

4、還原csv文件

[root@localhost mongodb]# mongoimport -d tank -c users --type csv --headerline --file tank/users.csv

六、實例

[root@meteor ~]# mkdir backup
[root@meteor ~]# mongodump -h localhost --port 27027 -d person -o backup/ -u person -p 123
2016-08-04T10:09:36.701+0800writing person.p1 to
2016-08-04T10:09:36.701+0800done dumping person.p1 (1 document)
[root@meteor ~]# ls backup/person/
p1.bson  p1.metadata.json
[root@meteor ~]# mongo localhost:27027/admin -u admin -p
MongoDB shell version: 3.2.8
Enter password:
connecting to: localhost:27027/admin
> use person
switched to db person
> show collections
p1
> db.p1.drop()
true
> show collections
> exit
bye
[root@meteor ~]# mongorestore -h localhost --port 27027 -d person backup/person/ -u person -p 123
2016-08-04T10:11:42.234+0800building a list of collections to restore from backup/person dir
2016-08-04T10:11:42.235+0800reading metadata for person.p1 from backup/person/p1.metadata.json
2016-08-04T10:11:42.256+0800restoring person.p1 from backup/person/p1.bson
2016-08-04T10:11:42.268+0800restoring indexes for collection person.p1 from metadata
2016-08-04T10:11:42.268+0800finished restoring person.p1 (1 document)
2016-08-04T10:11:42.268+0800done
[root@meteor ~]#
[root@meteor ~]# mongo localhost:27027/person -u person -p 123
MongoDB shell version: 3.2.8
connecting to: localhost:27027/person
> show collections
p1
> db.p1.find()
{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }
[root@meteor ~]# rm backup/* -rf
[root@meteor ~]# mongoexport -h localhost --port 27027 -u person -p 123 -d person -c p1 -o backup/person.p1.dat
2016-08-04T10:22:06.773+0800connected to: localhost:27027
2016-08-04T10:22:06.773+0800exported 1 record
[root@meteor ~]# mongoimport -h localhost --port 27027 -u person -p 123 -d person -c p2 --upsert backup/person.p1.dat
2016-08-04T10:25:16.414+0800connected to: localhost:27027
2016-08-04T10:25:16.434+0800imported 1 document
[root@meteor ~]# mongo localhost:27027/person -u person -p 123
MongoDB shell version: 3.2.8
connecting to: localhost:27027/person
> show collections
p1
p2
> db.p2.find()
{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }
> db.p1.find()
{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }
{ "_id" : ObjectId("57a2a9c43f2b617cfdd64c63"), "name" : "eric", "gender" : "female", "age" : 18 }
{ "_id" : ObjectId("57a2bfe38381eac036252b7c"), "name" : "test1", "gender" : "male", "age" : 20 }
> exit
bye
[root@meteor ~]# rm -rf backup/* ; ls backup/
[root@meteor ~]# mongodump -h localhost --port 27027 -d person -o backup/ -u person -p 123    備份時備份整個庫中的所有表
2016-08-04T12:36:36.321+0800writing person.p1 to
2016-08-04T12:36:36.321+0800writing person.p2 to
2016-08-04T12:36:36.322+0800done dumping person.p1 (3 documents)
2016-08-04T12:36:36.322+0800done dumping person.p2 (1 document)
[root@meteor ~]# ls backup/
person
[root@meteor ~]# ls backup/person/
p1.bson  p1.metadata.json  p2.bson  p2.metadata.json
[root@meteor ~]# mongo localhost:27027/person -u person -p 123
MongoDB shell version: 3.2.8
connecting to: localhost:27027/person
> db.p1.drop()
true
> db.p2.drop()
true
> show collections
> exit
bye
[root@meteor ~]# mongorestore -h localhost --port 27027 -d person -c p1 backup/person/p1.bson -u person -p 123
        注：可以單獨恢復指定的表
2016-08-04T12:38:55.541+0800checking for collection data in backup/person/p1.bson
2016-08-04T12:38:55.541+0800reading metadata for person.p1 from backup/person/p1.metadata.json
2016-08-04T12:38:55.560+0800restoring person.p1 from backup/person/p1.bson
2016-08-04T12:38:55.639+0800restoring indexes for collection person.p1 from metadata
2016-08-04T12:38:55.640+0800finished restoring person.p1 (3 documents)
2016-08-04T12:38:55.641+0800done
[root@meteor ~]# mongo localhost:27027/person -u person -p 123
MongoDB shell version: 3.2.8
connecting to: localhost:27027/person
> show tables
p1
> db.p1.find()
{ "_id" : ObjectId("57a2a9c43f2b617cfdd64c63"), "name" : "eric", "gender" : "female", "age" : 18 }
{ "_id" : ObjectId("57a2bfe38381eac036252b7c"), "name" : "test1", "gender" : "male", "age" : 20 }
{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }
> exit
bye
[root@meteor ~]