MongoDB balancer的使用详解


Posted in MongoDB onApril 30, 2021

   在MongoDB中,balancer(平衡器)是一个后台进程,它监控每个shard上的chunk数量,一旦chunk的数量差异超过了阈值,balancer会自动迁移数据块,从而保证每个分片上chunk数量的相对平衡。

   整个搬迁的过程对于用户来说是透明的,但是搬迁的过程中会对用户产生一些影响。

01 balancer简介

   从MongoDB3.4开始,balancer运行在config server的主节点上。

    在3.4版本中,balancer进程活跃期间,config server的主节点通过修改locks集合中的一个_id为balancer的文档,来持有"balancer lock";

    3.6版本中,balancer不再持有锁

    默认的情况下,balancer始终处于开启状态,可以使用下面的命令来查看balancer的运行情况:

mongos> sh.getBalancerState()
true

    同样的,我们可以使用下面几个命令来简单的管理balancer:

查看banlancer是否正在工作
sh.isBalancerRunning() 

停止balancer
sh.stopBalancer()

启动balancer
sh.setBalancerState( true )

02 balancer工作中可能对业务造成的影响?

1、磁盘占用:
   从MongoDB2.6开始,MongoDB会自动归档迁移的chunk文档,以方便在chunk搬迁过程中出现问题后的文档恢复。

   我们可以通过配置文件中的参数:sharding.archiveMovedChunks

来控制是否开启迁移过程中chunk的自动归档,该参数在MongoDB2.6和3.0版本是默认开启的,其他版本都是默认关闭的。

2、带宽和负载占用:

    balancer再对chunk迁移过程中,会造成带宽和负载方面的开销。为了减轻这些影响,平衡器做了如下的工作:

a、一次迁移只能迁一个chunk,

b、一个shard同一时间只能执行一个迁移任务

c、从MongoDB3.4开始,引入了并行的chunk迁移,对于一个有n个shard的集群,每次最多并行迁移n/2(向下取整)个数据块

d、只有当chunk数量最多的shard和chunk数量最少的shard的差异达到阈值的时候,才开始迁移chunk

e、支持用户设置balancer的窗口时间,在业务低峰窗口时间内进行chunk的迁移工作,从而最大程度减轻对业务的影响。

03 设置balancer的执行时间窗口

 1、通过mongo shell连接到mongos上

2、切换到config数据库

    use config

3、确保当前balancer是开启的

    sh.getBalancerState()  返回true

4、设置窗口时间

db.settings.update(
   { _id: "balancer" },
   { $set: { activeWindow : { start : "<start-time>", stop : "<stop-time>" } } },
   { upsert: true }
)

其中,start-time和stop-time的取值如下:

  • For HH values, use hour values ranging from 00 - 23.
  • For MM value, use minute values ranging from 00 - 59.

MongoDb会以config数据库的primary节点的时间为参考,开始执行相关chunk的搬迁操作。

要确保设置的时间范围内,所有的chunk能够搬迁完毕,否则会出现数据库搬迁过后,依旧不均衡的现象。

移除chunk搬迁时间窗口的命令如下:

use config
db.settings.update({ _id : "balancer" }, { $unset : { activeWindow : true } })

04 备份和balancer

   MongoDB中,不要在备份的时候启用balancer,否则,备份的数据将会不一致。通常情况下,备份的时间窗口要和balancer的时间窗口错开,如果balancer没有设置时间窗口,则在备份的时候,关闭balancer

   时间关系,就先到这里吧,其他内容后面再说

以上就是MongoDB balancer的使用详解的详细内容,更多关于MongoDB balancer的使用的资料请关注三水点靠木其它相关文章!

MongoDB 相关文章推荐
详解MongoDB的条件查询和排序
Jun 23 MongoDB
MongoDB安装使用并实现Python操作数据库
Jun 28 MongoDB
Mongo服务重启异常问题的处理方法
Jul 01 MongoDB
mongodb的安装和开机自启动详细讲解
Aug 02 MongoDB
阿里云服务器部署mongodb的详细过程
Sep 04 MongoDB
springboot + mongodb 通过经纬度坐标匹配平面区域的方法
Nov 01 MongoDB
MongoDB使用场景总结
Feb 24 MongoDB
MongoDB数据库部署环境准备及使用介绍
Mar 21 MongoDB
SpringBoot集成MongoDB实现文件上传的步骤
Apr 18 MongoDB
NoSQL优缺点与MongoDB数据库简介
Jun 05 MongoDB
MongoDB使用profile分析慢查询的步骤
Apr 30 #MongoDB
MongoDB数据库的安装步骤
Jun 18 #MongoDB
MongoDB数据库常用的10条操作命令
Jun 18 #MongoDB
MongoDB 常用的crud操作语句
Jun 20 #MongoDB
MongoDB orm框架的注意事项及简单使用
Jun 20 #MongoDB
详解MongoDB的条件查询和排序
Jun 23 #MongoDB
SpringBoot整合MongoDB的实现步骤
Jun 23 #MongoDB
You might like
建立动态的WML站点(一)
2006/10/09 PHP
实用函数5
2007/11/08 PHP
PHP strtotime函数详解
2009/12/18 PHP
PHP中实现汉字转区位码应用源码实例解析
2010/06/14 PHP
PHP导入Excel到MySQL的方法
2011/04/23 PHP
php实现用于计算执行时间的类实例
2015/04/18 PHP
laravel自定义分页效果
2017/07/23 PHP
php 多进程编程父进程的阻塞与非阻塞实例分析
2020/02/22 PHP
Javascript条件判断使用小技巧总结
2008/09/08 Javascript
JavaScript Scoping and Hoisting 翻译
2012/07/03 Javascript
JavaScript的strict模式与with关键字介绍
2014/02/08 Javascript
JavaScript数据库TaffyDB用法实例分析
2015/07/27 Javascript
js实现TAB切换对应不同颜色的代码
2015/08/31 Javascript
jQuery插件cxSelect多级联动下拉菜单实例解析
2016/06/24 Javascript
node.js报错:Cannot find module 'ejs'的解决办法
2016/12/14 Javascript
原生js FileReader对象实现图片上传本地预览效果
2020/03/27 Javascript
jQuery取得元素标签名称小结(附代码)
2017/08/16 jQuery
react router 4.0以上的路由应用详解
2017/09/21 Javascript
微信小程序实现跟随菜单效果和循环嵌套加载数据
2017/11/21 Javascript
详解vue-cli项目中怎么使用mock数据
2018/05/29 Javascript
vue.js提交按钮时进行简单的if判断表达式详解
2018/08/08 Javascript
vue自动添加浏览器兼容前后缀操作
2020/08/13 Javascript
[01:01:24]DOTA2上海特级锦标赛A组败者赛 EHOME VS CDEC第三局
2016/02/25 DOTA
[01:08:24]DOTA2-DPC中国联赛 正赛 RNG vs Phoenix BO3 第一场 2月5日
2021/03/11 DOTA
python使用正则筛选信用卡
2019/01/27 Python
Python的matplotlib绘图如何修改背景颜色的实现
2019/07/16 Python
将python文件打包exe独立运行程序方法详解
2020/02/12 Python
python合并多个excel文件的示例
2020/09/23 Python
web页面录屏实现
2019/02/12 HTML / CSS
static全局变量与普通的全局变量有什么区别
2014/05/27 面试题
如何打造一封优秀的留学推荐信
2014/01/25 职场文书
餐厅销售主管职责范本
2014/02/19 职场文书
蛋糕店创业计划书范文
2014/09/21 职场文书
置业顾问岗位职责
2015/02/09 职场文书
2016教师学习教育法心得体会
2016/01/19 职场文书
你会写报告?产品体验报告到底该怎么写?
2019/08/14 职场文书