首页 > 代码库 > mongodb分片配置
mongodb分片配置
#本次配置时间为 2014-11-06 软件版本为:mongodb-linux-x86_64-2.4.3.tgz
linux :centos 5.9 64bit
##############################################################
本次部署分片的方式,只为测试环境: #
10.8.10.234 10.8.10.235 10.8.10.236 #
shard1 分片 master slaver arbiterOnly #
shard2 分片 master slaver arbiterOnly #
shard3 分片 master slaver arbiterOnly #
#
###############################################################
#每个服务器配置:
mkdir -p /data/mongodb/config/data
mkdir -p /data/mongodb/config/log
mkdir -p /data/mongodb/mongos/log
mkdir -p /data/mongodb/shard1/data
mkdir -p /data/mongodb/shard1/log
mkdir -p /data/mongodb/shard2/data
mkdir -p /data/mongodb/shard2/log
mkdir -p /data/mongodb/shard3/data
mkdir -p /data/mongodb/shard3/log
tar -xvzf mongodb-linux-x86_64-2.4.3.tgz
mv mongodb-linux-x86_64-2.4.3 /data/mongodb/mongodb
#每个服务器配置服务:
/data/mongodb/mongodb/bin/mongod --configsvr --dbpath /data/mongodb/config/data --port 21000 --logpath /data/mongodb/config/log/config.log --fork
#每台服务器 启动分片服务:
/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard1 --port 22001 --dbpath /data/mongodb/shard1/data --logpath /data/mongodb/shard1/log/shard1.log --fork --nojournal --oplogSize 10
/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard2 --port 22002 --dbpath /data/mongodb/shard2/data --logpath /data/mongodb/shard2/log/shard2.log --fork --nojournal --oplogSize 10
/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard3 --port 22003 --dbpath /data/mongodb/shard3/data --logpath /data/mongodb/shard3/log/shard3.log --fork --nojournal --oplogSize 10
# 1台或者多台服务器启动mongos路由,应用程序连接该路由端口。
#mongos 需要等到3台服务器的配置文件都启动之后 才能启动,否则报错。
/data/mongodb/mongodb/bin/mongos --configdb 10.8.10.234:21000,10.8.10.235:21000,10.8.10.236:21000 --port 20000 --logpath /data/mongodb/mongos/log/mongos.log --fork
#################################
#登入任意服务器执行:
mongo 127.0.0.1:22001
use admin
设置分片1
>config = { _id:"shard1", members:[
{_id:0,host:"10.8.10.234:22001",priority:1},
{_id:1,host:"10.8.10.235:22001",priority:1},
{_id:2,host:"10.8.10.236:22001",arbiterOnly:true}
]
}
>rs.initiate(config);
# ,priority:N 是设置master 优先级 可以不配置,建议把分片的master放置在不同的服务器,实现读写压力分流
# arbiterOnly:true 需要配置。省略后,变成1 master + 2个slaver 与方案不符
############################
mongo 127.0.0.1:22002
use admin
设置分片2
>config = { _id:"shard2", members:[
{_id:0,host:"10.8.10.234:22002",priority:1},
{_id:1,host:"10.8.10.235:22002",priority:1},
{_id:2,host:"10.8.10.236:22002",arbiterOnly:true}
]
}
>rs.initiate(config);
# ,priority:N 是设置master 优先级 可以不配置。建议把分片的master放置在不同的服务器,实现读写压力分流
# arbiterOnly:true 需要配置 。省略后,变成1master + 2个slaver 与方案不符
#############################
mongo 127.0.0.1:22003
use admin
设置分片3
>config = { _id:"shard3", members:[
{_id:0,host:"10.8.10.234:22003",priority:1},
{_id:1,host:"10.8.10.235:22003",priority:1},
{_id:2,host:"10.8.10.236:22003",arbiterOnly:true}
]
}
>rs.initiate(config);
# ,priority:N 是设置master 优先级 可以不配置。建议把分片的master放置在不同的服务器,实现读写压力分流
# arbiterOnly:true 需要配置。省略后,变成1master + 2个slaver 与方案不符
#########################
连接mongs: bin/mongo 127.0.0.1:20000
#使用admin数据库 user admin
串联路由服务器与分配副本集1
db.runCommand( { addshard : "shard1/10.8.10.234:22001,10.8.10.235:22001,10.8.10.236:22001"});
串联路由服务器与分配副本集2
db.runCommand( { addshard : "shard2/10.8.10.234:22002,10.8.10.235:22002,10.8.10.236:22002"});
串联路由服务器与分配副本集3
db.runCommand( { addshard : "shard3/10.8.10.234:22003,10.8.10.235:22003,10.8.10.236:22003"});
#查看分片服务器的配置
db.runCommand( { listshards : 1 } );
备注:每个分片副本集的仲裁节点结果不列出来
##############################
###手动选定master备注:
在配置分片的时候 添加优先级可以手动选择master
分片配置后之后,使用如下命令,在分片的主节点登录,可以将members[1] 提升为Master。
rs.status();
rs.conf();
cfg=rs.conf();
cfg.members[0].priority=1
cfg.members[1].priority=2
#cfg.members[2] 仲裁机不用设置
rs.reconfig(cfg);
创建数据测试:
#指定testdb分片生效
db.runCommand( { enablesharding :"testdb"});
#指定数据库里需要分片的集合和片键
db.runCommand( { shardcollection : "testdb.table1",key : {id: 1} } )
我们设置testdb的 table1 表需要分片,根据 id 自动分片到 shard1 ,shard2,shard3 上面去。要这样设置是因为不是所有mongodb 的数据库和表 都需要分片!
bin/mongo 127.0.0.1:20000
#使用testdb use testdb;
#插入测试数据
for (var i = 1; i <= 100000; i++) db.table1.save({id:i,"test1":"testval1"});
#查看分片情况如下,部分无关信息省掉了
db.table1.stats();
看到数据分到3个分片,各自分片数量为: shard1 “count” : 42183,shard2 “count”: 38937,shard3 “count” : 18880。已经成功了!不过分的好像不是很均匀,所以这个分片还是很有讲究的,后续再深入讨论。
为了充分利用3台服务器资源,缓解磁盘Io ,以上方案可以如下变通:
##############################################################
在生产环境中,可以如下部署: #
10.8.10.234 10.8.10.235 10.8.10.236 #
shard1 分片 master slaver arbiterOnly #
shard2 分片 arbiterOnly master slaver #
shard3 分片 slaver arbiterOnly master #
#
###############################################################
本文出自 “笨鸟先飞” 博客,请务必保留此出处http://2574526.blog.51cto.com/2564526/1573855
mongodb分片配置