MongoDB复制集的选举原理
MongoDB复制的原理
MongoDB的复制是基于操作日志oplog,相当于MySQL中的二进制日志,只记录发生改变的记录。复制是将主节点的oplog日志同步并应用到其他从节点的过程。
MongoDB选举的原理
MongoDB的节点分为三种类型,分别为标准节点(host)、被动节点(passive)和仲裁节点(arbiter)
- 只有标准节点才有可能被选举为活跃节点(主节点),拥有选举权。被动节点有完整副本,不可能成为活跃节点,具有选举权。仲裁节点不复制数据,不可能成为活跃节点,只有选举权。说白了就是只有标准节点才有可能被选举为主节点,即使在一个复制集中说有的标准节点都宕机,被动节点和仲裁节点也不会成为主节点。后续有示例演示验证。
- 标准节点与被动节点的区别:priority值高者是标准节点,低者则为被动节点
- 选举规则是票数高的获胜,priority是优先权0~1000的值,相当于额外增加0~1000的票数。选举结果:票数高者获胜;若票数相同,数据新者获胜。
MongoDB复制集节点间选举所示 前文链接 Yum安装MongoDB及数据库管理 配置MongoDB复制集
示例验证复制集选举原理
创建4个实例
创建新实例的path文件和dbpath的文件目录,并为日志文件设置权限
mkdir -p /data/mongodb/logs
// path目录,因为在安装完成之后就会有一个实例,所以这里我们只需要创建三个实例即可
mkdir -p /data/mongodb/mongo{2,3,4} //创建dbpath目录
touch /data/mongodb/logs/mongod{2,3,4}.log //创建日志文件
chmod 777 /data/mongodb/logs/*.log //为日志文件赋予权限
修改配置文件(/etc/mongod.conf)
path:
dbPath:
port:
bindIp:
replication:
replSetName: //修改配置文件中这五个项目的值
关闭防火墙及selinux防火墙
systemctl disable firewalld.service
systemctl stop firewalld.service
setenforce 0
启动实例
mongod -f /etc/mongod.conf
配置复制集
创建有四个节点组成的复制集,创建时设置优先级
本次复制集由四个节点组成,分别包括两个标准节点,一个被动节点,一个仲裁节点。
mongo //=进入数据库
chen={"_id":"chenrs","members":[{"_id":0,"host":"172.16.10.29:27017","priority":100},{"_id":1,"host":"172.16.10.29:27018","priority":100},{"_id":2,"host":"172.16.10.29:27019","priority":0},{"_id":3,"host":"172.16.10.29:27020","arbiterOnly":true}]}
初始化复制集
rs.initiate(chen)
查看各节点的的身份
rs.isMaster()
查看oplpog日志
此时对数据库进行一些增删改查的操作,注意在oplog日志中不会记录查询的语句,只会记录对数据库进行更改的语句
use stady //使用stady库
db.abc.insert({"id":1,"name":"zhangsan"}) //向表abc中写入一条数据
db.abc.insert({"id":2,"name":"lisi"}) //再次插入一条数据
db.abc.find() //查看表中内容
db.abc.update({"id":2},{$set:{"name":"jack"}}) //修改表数据
db.abc.remove({"id":1} //删除表数据
查看oplog中内容
use local
show collections //可以看到其中有一个oplog.rs文件
db.oplog.rs.find()
//由于内容过多,在这里就不展示,查看之后就会发现,没有记录查询的记录,只有记录对数据库做更改的操作
模拟主节点故障
关闭主节点
kill -9 + 进程号 //关闭主节点
mongod -f /etc/mongod4.conf --shutdown //关闭主节点
mongo --port 27018
chenrs:PRIMARY> rs.status() //此时该节点已经成为主节点
{
"set" : "chenrs",
"date" : ISODate("2018-07-16T05:30:04.152Z"),
"myState" : 1,
···省略部分内容
"members" : [
"_id" : 0,
"name" : "172.16.10.29:27017",
"health" : 0, //健康值为0,处于非活跃状态
"state" : 8,
"stateStr" : "(not reachable/healthy)",
···省略部分内容
"_id" : 1,
"name" : "172.16.10.29:27018",
"health" : 1,
"state" : 1,
"stateStr" : "PRIMARY", //此时1为主节点
···省略部分内容
"_id" : 2,
"name" : "172.16.10.29:27019",
"health" : 1,
"state" : 2,
"stateStr" : "SECONDARY",
···省略部分内容
"_id" : 3,
"name" : "172.16.10.29:27020",
"health" : 1,
"state" : 7,
"stateStr" : "ARBITER",
···省略部分内容
]
模拟另外一个主节点故障
mongod -f /etc/mongod2.conf --shutdown
mongo --port 27019
chenrs:SECONDARY> rs.status() //仍处于secondary状态
{
"set" : "chenrs",
"date" : ISODate("2018-07-16T05:40:09.740Z"),
"members" : [
{
"_id" : 0,
"name" : "172.16.10.29:27017",
"health" : 0,
"state" : 8,
"stateStr" : "(not reachable/healthy)",
···省略部分内容
"_id" : 1,
"name" : "172.16.10.29:27018",
"health" : 0,
"state" : 8,
"stateStr" : "(not reachable/healthy)",
···省略部分内容
"_id" : 2,
"name" : "172.16.10.29:27019",
"health" : 1,
"state" : 2,
"stateStr" : "SECONDARY", //即使两个标准节点都处于宕机状态,被动节点和仲裁节点也没有成为主节点
···省略部分内容
"_id" : 3,
"name" : "172.16.10.29:27020",
"health" : 1,
"state" : 7,
"stateStr" : "ARBITER",
]
···省略部分内容
MongoDB复制集管理
配置允许在从节点读取数据
默认MongoDB复制集的从节点是不能读取数据的,但是可以使用密令来允许能够在从节点读取数据
rs.slaveOk() //允许从节点能够读取数据
查看复制集状态信息
rs.help
rs.printReplicationInfo() //查看oplog日志文件的大小及时间范围
rs.printSlaveReplicationInfo() //查询节点及节点复制的时间
调整oplog日志文件大小
如果节点属于复制集成员,此时你想要修改oplog的大小是不被允许的,所以要将节点移出复制集想要修改日志文件的默认大小。此时要做的是首先要关闭节点的服务,然后退出复制集
关闭节点服务(属于离线升级)
use admin //在复制集的从节点上做
db.shutdownServer() //关闭服务,此时再想登陆该节点则会失败
节点退出复制集
注销掉replication的值和修改port值,将其作为单实例启动
vim /etc/mongod2.conf
#replication:
# replSetName: chenrs
port: 27028
mongod -f /etc/mongod2.conf //启动实例,此时该实例不属于复制集
完全备份oplog日志
mongodump --port 27028 --db local --collection 'oplog.rs' //在linux界面操作
删除节点中oplog文件
> use local
> db.oplog.rs.drop()
重建oplog日志
db.runCommand( { create: "oplog.rs", capped: true, size: (2 * 1024 * 1024 * 1024) } )
再次关闭节点服务
use admin
db.shutdownServer()
将节点加入到复制集
回调参数,同时要加一个参数指定日志文件大小
vim /etc/mongod2.conf
replication:
replSetName: chenrs
oplogSizeMB: 2048 //单位为兆
mongod -f /etc/mongod2.conf //启动实例
mongo -port 27018 //进入实例
查看oplog大小
rs.printReplicationInfo()
对于日志文件大小的更改,只对该节点生效,其他节点仍然是默认值
部署认证复制
创建管理用户
use admin
db.createUser({"user":"root","pwd":"123123","roles":["root"]})
配置密钥验证
为了使其他的节点还能够和主节点进行同步,创建密钥文件使其他节点能够同步
- 创建验证文件
# cd /usr/bin/
# echo "chenrs key"> chenrskey1
# echo "chenrs key"> chenrskey2
# echo "chenrs key"> chenrskey3
# echo "chenrs key"> chenrskey4 //密钥内容自定义,但是要保证内容的一致性
# chmod 600 chenrskey{1..4} //设置文件权限,不设置在接下来的启动中会报错
- 修改配置文件,开启mongodb的安全验证功能(四个配置文件都要修改,注意内容差异)
vim /etc/mongod.conf
security:
keyFile: /usr/bin/chenrskey1 //每个节点的验证文件不同,要根据不同的节点修改
clusterAuthMode: keyFile //认证类型,密钥文件认证
- 重启服务
mongod -f /etc/mongod.conf --shutdown
mongod -f /etc/mongod.conf /其他几台的重启方式都相同,重复操作即可
身份验证登陆(先验证主,再验证从)
当你直接使用登陆命令登陆系统时,使用show dbs 是不能够查看数据的,此时就需要使用身份验证
mongo --port 27018
use admin
db.auth("root","123123")