mongodb系列之--分片的原理与配置
1.分片的原理概述
分片就是把数据分成块,再把块存储到不同的服务器上,mongodb的分片是自动分片的,当用户发送读写数据请求的时候,先经过mongos这个路由层,mongos路由层去配置服务器请求分片的信息,再来判断这个请求应该去那一台服务器上读写数据。
2.分片的条件
1):服务器磁盘不够的时候
2):服务器出现写瓶颈的时候
3):想将大量数据放在内存中提高性能
3.分片中的角色,有三种:
1):配置服务器:存放分片信息,分片的数据与片的关系
2):mongos路由:是一个路由进程,把所有对mongodb的数据读写请求根据配置服务器的配置信息分配到不同的分片服务器上去。本身不存储数据与配置信息,但会缓存配置信息,
3):片:指一个分片,这个分片可以是一台服务器,也可以是多台服务器组成的一个集群。对应的多台服务器中只能有一台主服务器
4.分片是以什么来分的
1)以数据库来分,那就是把数据库里的多个集合分到不同的分片上,同一个集合的数据只能在同一分片上
2)以某个集合中的某个键来分,这个键称为片键,根据设置的片键把一个集合的数据分到不同的片上,这个分片键可以是多个键的组合键
5.实际的生产环境
在一个实际的生产环境中会同时存在多个配置服务器,多个mongos路由进程,多个分片,每一个分片会是一个副本集。
因为配置服务器与mongos路由进程占用的资源非常少,所以有些人会通过不同的端口,把他们配置到同一台服务器上,但是不要把多个配置服务器与多个mongos路由进程配置在同一台服务器,最好是一台服务器一个配置服务器,一个路由进程就够,如果是多个在同一台服务器,当这个服务器挂掉了,那你的整个分片的架构可能就跟着挂了,不能提供服务了,下面给出一个参考的架构图。
6.搭建分片服务器架构的流程
1):创建配置服务器的数据与日志目录,并配置和启动配置服务器,主要参数:mongod --configsvr ..............
2):创建mongos的日志目录,因为mongos本身不存储数据,所以不用数据目录。接着配置和启动mongos路由进程,启动的时候是以mongos,来启动的。主要参数:mongos --configdb 配置服务器的ip:端口 ............
3) : 创建分片副本集的数据与日志目录,配置和启动副本集,主要参数:mongod --shardsvr --replSet 副本集名 .........
4):对分片副本集进行初始化,设置仲裁节点,把初始化信息写在config变量中,接着用rs.initiate(config)进行初始化
5):登录mongos,把副本集增加到切片中,必须在admin数据中运行命令:db.runCommand({"addshard":"副本集名称/ip:port,ip:port......","name":"分片名"})
6):打开数据库和集合的分片功能db.runCommand({"enableSharding":"数据库"}),db.runCommand({"shardcollection":"数据库.集合名","key":{"键名":1}})