首页 > 代码库 > Mongodb集群与分片 1

Mongodb集群与分片 1

2024-07-17 17:33:14   225人阅读

分片集群

 
Mongodb中数据分片叫做chunk，它是一个Collection中的一个连续的数据记录，但是它有一个大小限制，不可以超过200M，如果超出产生新的分片。
 
下面是一个简单的分片集群实例
 
分片集群的构成：
  • Shard server：mongod实例，用于存储实际的数据块
  • Config server：mongod实例，用于存储整个Cluster Metadata，其中包括chunk信息。
  • Route server：mongos实例，做为整个集群的前端路由，整个集群由此接入。从而让整个集群看着像单一进程数据库。
  • 备注：route做为路由会将请求转发到实际的目标服务进程，并将多个结果合并并回传客户端。在route并不存储任何的数据和状态，所有的信息都是启动的时候从Config server上获取，当Config server上有信息更新，也会同步到route server上。 
 
构建一个简单的集群
 
集群目录：
总共有四个mongodb，目录分别为/home/scotte.ye/mongo1,mongo2,mongo3,mongo4
其中mongo1,mongo2做为shard server
mongo3做为config server
mongo4做为route server
 
1、启动Shard server
 
// 启动shard server 1
 
$ cd /home/scotte.ye/mongo1
$ ./mongo -shardsvr -port 10000 -dbpath=/home/data/10000/ -fork -logpath=/home/log/10000/null
$ all output going to: /home/log/10000/null
$ fork process: 10657
 
//启动shard server 2
 
$ cd /home/scotte.ye/mongo2
$ ./mongo -shardsvr -port 10011 -dbpath=/home/data/10011/ -fork -logpath=/home/log/10011/null
$ all output going to: /home/log/10011/null
$ fork process: 10661
 
//启动Config server
 
$ cd /home/scotte.ye/mongo3
$ ./mongo -configsvr -port 20000 -dbpath=/home/data/20000/ -fork -logpath=/home/log/20000/null
$ all output going to: /home/log/20000/null
$ fork process: 10857
 
//启动Route server
 
$ cd /home/scotte.ye/mongo4
$ ./mongos -configdb 192.168.35.106:20000 -fork -logpath=/home/log/20000/null
$ all output going to: /home/log/20000/null
$ fork process: 10900
 
//注在启动Route server的时候，还可以通过-chunksize参数来进行配置分块的大小
 
2、配置相关
 
配置相关命令说明：
  • addshard：添加shard server到集群。相类似的命令还有，listshards和removeshard
  • enablesharding：用于设置那些数据库可以被分布存储
  • shardcollection：用于设置具体被分片的集合的名称，且必须指定 share key,系统会自动创建索引
  • 注：shardcollection的集合必须只有一个unique index且必须是shard key
开始配置：
 
$ cd /home/scotte.ye/mongo3/bin
$ ./mongo
$ >use admin
$#只有在admin数据库才可以操作
$ switched to db admin
$ >db.runCommand({addshard:‘192.168.35.106:10000‘})
$ {"shardAdded":"shard0000","OK":1}
$ >db.runCommand({addshard:‘192.168.35.106:10011‘})
$ {"shardAdded":"shard0001","OK":1}
$#添加相应到shard server到shard cluster
$ >db.runCommand({enablesharding:‘test‘})
$#使相应的数据库表test可以分布存储,test可以更换成相应的其它数据库名字
$ >db.runCommand({sahrdcollection:‘test.user‘,key:{_id:1}})
$ {"OK":1}
$#指明相应的集合和shard key
$ {"collectionsharded":"test.user","OK":1}
 
3、常用的状态查询命令
  • printShardingStatus()：查看Sharding信息
  • db.<collection_name>.stats()：查看具体shard存储信息
  • isdbgrid：用于确认当前是否是sharding cluster
  • ismaster：判断是不是master


联系
我们