良玉的博客 点点滴滴,积水成河_良玉的博客_页游、手游linux运维工程师之路

mongodb主从同步及备份还原

主从同步:

1.建立数据库目录

mkdir  /mongodb/masterdb

mkdir /mongodb/slavedb_1

mkdir /mongodb/slavedb_2

2.分别启动主从服务器
启动主服务器监听10000端口

./bin/mongod -dbpath /mongodb/masterdb/ --port10000 --master  
启动两个从服务器  分别用10001 和 10002 端口  也可以使用 master master-> slave 的设置

./bin/mongod -dbpath /mongodb/slavedb_1 --source localhost:10000--slave --port 10001

./bin/mongod -dbpath /mongodb/slavedb_2 --source localhost:10000--slave --port 10002

#启动后  就会看到有日志 显示从主服务器复制内容了

相关参数:./mongod--help
--autoresync 当发现从服务器的数据不是最新时,开始从主服务器请求同步数据
--slavedelay 同步延迟,单位:秒


3.测试主从
a、在主服务器新建数据库

./bin/mongo --port 10001

show dbs

#里面只有系统数据库,同时如果做插入数据的操作 会提示 not master

use testdb

db.blog.save({title:"newarticle"})

b、在从服务器上查看同步数据

./bin/mongo --port 10001

MongoDB shell version: 1.6.0

connecting to: 127.0.0.1:10001/test

> show dbs

admin

local

testdb

> use testdb

switched to db testdb

> db.blog.find()

{ "_id" :ObjectId("4c776ccce7af0727ce4b6234"), "title" : "newarticle" } #此为同步过来的数据,测试成功

备份与恢复:

mongodump -h 192.168.0.39:10001 -d csf -o /backup/mongodb
将/tmp/backup 下面的文件导入数据库:
mongorestore -h 192.168.0.39:10001 -d csf -drop --directoryperdb/backup/mongodb/csf/
mongodb提供了两个命令来备份(mongodump)和恢复(mongorestore)数据库。


1、备份数据库
语法:mongodump-h host -d database -o dir_to_store_backup
mongodump -h 127.0.0.1 -d jtxm -o /home/backup/
出现此提示说明备份成功

2、恢复数据库
语法:mongorestore-h 主机 -d 目标库-drop  --directoryperdb 源文件
【注释】--drop参数,有此参数,则表示,先删除所有的记录,然后恢复。如无此参数,则恢复备份时候的数据,备份之后新增加的数据依然存在;/backup/mongodb则是备份文件存放路径

./mongorestore -h 127.0.0.1 --directoryperdb /data/dump    


3.另外mongodb还提供了mongoexport 和 mongoimport 这两个命令来导出或导入数据,导出的数据是json格式的。也可以实现备份和恢复的功能

例:

mongoexport -d mixi_top_city_prod -cbuilding_45 -q '{ "uid" : "10832545" }' >mongo_10832545.bson

mongoimport -d mixi_top_city -c building_45--file mongo_10832545.bson



公共参数:
--port arg    指定端口
-h arg    指定主机
-d arg    指定database
-c arg    指定collection
--dbpath arg    指定mongod的数据库文件所在路径

备份:
bsondump
命令用法:bsondump[options] <bson fileName>
特别参数:
--type arg 输出文件的格式,arg=json,debug
在xp下不能用,没测试

mongodump
命令用法:mongodump[options]
特别参数:
-o arg 输出的"目录",不指定时,默认在执行命令的路径下创建dump目录导出
-q arg json query,此处可通过json查询,有选择性的导出数据
说明:
1.与mongorestore构成一对工具集,即由Mongodump导出的数据可由mongrestore恢复
2.mongodump可用于“热备份”
3.导出的数据是bson格式
性能:数据库中1g的数据导出后变成285M,大概8秒

mongoexport
命令用法:mongoexport[options]
特别参数:
-q arg 查询过滤器,jsonstring
-f args 输出的域,例如-fname,age,address
--csv 输出csv,不写此参数,默认为json
-o arg 输出的文件,默认为stdout
说明:
1.可以导出json或csv格式的文件
2.可以指定查询过滤器或指定输出的域
3.此工具导出的json,csv可能对某些数据类型不兼容,因此可能不能全部数据导出,mongodump就可以全部兼容
性能:1g数据,约1分40秒,导出大小为380M

恢复:
mongoimport
命令用法:mongoimport[options]
特别参数:
--file args 导入的文件,若无此参数,以stdin为标准
-f args 导入的数据域
--fieldFile arg 带域名称的文件
--ignoreBlanks 在csv,tsv文件中忽略空域
--type arg 导入文件的类型,默认为json,还可以为csv,tsv
--drop 插入前先删除原collection
--upsert 插入或更新已存在的对象
--jsonArray 导入json array,目前每个array的限制是4M
--headerline 只能用于csv,tsv文件中,用第一行作为文件头
说明:
接受json,csv,tsv格式的文件,每行为一个对象
{"somefield" : 123456, "created_at" : {"$date" :1285679232000}}此格式可解析日期。
性能:导入1g数据,2分20秒,失败33个对象

mongorestore
命令用法:mongorestore[options] [file or dir to restore]
特别参数:
--drop 导入前先dropcollection
--objcheck 插入前检测对象的合法性
--filter arg 插入前的过滤器
--indexesLast 插入完数据后再建立索引(此参数可提供更高的性能,建议选用)
说明:
1.与mongodump合用,在restore过程中,索引会重新创造
性能:1g数据,约6分钟

小结:
备份方面:mongodump的速度和压缩率都最好,每秒125M的数据,压缩率达28%
恢复方面:
mongoimport速度较快,但不保证数据完整导入
mongorestore,速度较慢,比mongoimport慢2.5倍左右,但是根据mongodump导出的数据,可以完整导入数据。


标签: mongodb主从

作者:良玉 分类:Mongodb 浏览:1650 评论:0
留言列表
发表评论
来宾的头像