首页 > 代码库 > mongodb分片配置

mongodb分片配置


#本次配置时间为 2014-11-06 软件版本为:mongodb-linux-x86_64-2.4.3.tgz   

linux :centos 5.9 64bit

##############################################################

本次部署分片的方式,只为测试环境:                          #

              10.8.10.234    10.8.10.235    10.8.10.236     #

shard1 分片       master        slaver       arbiterOnly    #

shard2 分片       master        slaver       arbiterOnly    #

shard3 分片       master        slaver       arbiterOnly    #

                                                            #                                                            

###############################################################





#每个服务器配置:


mkdir  -p /data/mongodb/config/data

mkdir  -p /data/mongodb/config/log


mkdir  -p /data/mongodb/mongos/log


mkdir  -p /data/mongodb/shard1/data

mkdir  -p /data/mongodb/shard1/log


mkdir  -p /data/mongodb/shard2/data

mkdir  -p /data/mongodb/shard2/log


mkdir  -p /data/mongodb/shard3/data

mkdir  -p /data/mongodb/shard3/log


tar -xvzf mongodb-linux-x86_64-2.4.3.tgz

mv mongodb-linux-x86_64-2.4.3  /data/mongodb/mongodb


#每个服务器配置服务:


 /data/mongodb/mongodb/bin/mongod --configsvr --dbpath /data/mongodb/config/data --port 21000 --logpath /data/mongodb/config/log/config.log --fork



#每台服务器 启动分片服务:

/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard1 --port 22001 --dbpath /data/mongodb/shard1/data --logpath /data/mongodb/shard1/log/shard1.log --fork --nojournal --oplogSize 10



/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard2 --port 22002 --dbpath /data/mongodb/shard2/data --logpath /data/mongodb/shard2/log/shard2.log --fork --nojournal --oplogSize 10



/data/mongodb/mongodb/bin/mongod --shardsvr --replSet shard3 --port 22003 --dbpath /data/mongodb/shard3/data --logpath /data/mongodb/shard3/log/shard3.log --fork --nojournal --oplogSize 10


# 1台或者多台服务器启动mongos路由,应用程序连接该路由端口。

#mongos 需要等到3台服务器的配置文件都启动之后 才能启动,否则报错。

/data/mongodb/mongodb/bin/mongos --configdb 10.8.10.234:21000,10.8.10.235:21000,10.8.10.236:21000 --port 20000 --logpath /data/mongodb/mongos/log/mongos.log --fork



#################################

#登入任意服务器执行:


mongo 127.0.0.1:22001 

use admin


设置分片1 


>config = { _id:"shard1", members:[

  {_id:0,host:"10.8.10.234:22001",priority:1},

  {_id:1,host:"10.8.10.235:22001",priority:1},

  {_id:2,host:"10.8.10.236:22001",arbiterOnly:true}

  ]

  }


>rs.initiate(config);


# ,priority:N 是设置master 优先级 可以不配置,建议把分片的master放置在不同的服务器,实现读写压力分流

# arbiterOnly:true 需要配置。省略后,变成1 master + 2个slaver 与方案不符


############################


mongo 127.0.0.1:22002 

use admin


设置分片2 

>config = { _id:"shard2", members:[

  {_id:0,host:"10.8.10.234:22002",priority:1},

  {_id:1,host:"10.8.10.235:22002",priority:1},

  {_id:2,host:"10.8.10.236:22002",arbiterOnly:true}

  ]

  }


>rs.initiate(config);


# ,priority:N 是设置master 优先级 可以不配置。建议把分片的master放置在不同的服务器,实现读写压力分流

# arbiterOnly:true 需要配置 。省略后,变成1master + 2个slaver 与方案不符


#############################


mongo 127.0.0.1:22003 

use admin

设置分片3


 

>config = { _id:"shard3", members:[

  {_id:0,host:"10.8.10.234:22003",priority:1},

  {_id:1,host:"10.8.10.235:22003",priority:1},

  {_id:2,host:"10.8.10.236:22003",arbiterOnly:true}

  ]

  }



>rs.initiate(config);


# ,priority:N 是设置master 优先级 可以不配置。建议把分片的master放置在不同的服务器,实现读写压力分流

# arbiterOnly:true 需要配置。省略后,变成1master + 2个slaver 与方案不符


#########################


连接mongs:  bin/mongo 127.0.0.1:20000

#使用admin数据库 user admin

串联路由服务器与分配副本集1


db.runCommand( { addshard : "shard1/10.8.10.234:22001,10.8.10.235:22001,10.8.10.236:22001"});


串联路由服务器与分配副本集2

db.runCommand( { addshard : "shard2/10.8.10.234:22002,10.8.10.235:22002,10.8.10.236:22002"});


串联路由服务器与分配副本集3

db.runCommand( { addshard : "shard3/10.8.10.234:22003,10.8.10.235:22003,10.8.10.236:22003"});



#查看分片服务器的配置

 db.runCommand( { listshards : 1 } );


 备注:每个分片副本集的仲裁节点结果不列出来

##############################


###手动选定master备注:


在配置分片的时候 添加优先级可以手动选择master


分片配置后之后,使用如下命令,在分片的主节点登录,可以将members[1] 提升为Master。

rs.status();

rs.conf();

cfg=rs.conf();

cfg.members[0].priority=1

cfg.members[1].priority=2

#cfg.members[2] 仲裁机不用设置

rs.reconfig(cfg);



创建数据测试:

  #指定testdb分片生效

  db.runCommand( { enablesharding :"testdb"});

  #指定数据库里需要分片的集合和片键

  db.runCommand( { shardcollection : "testdb.table1",key : {id: 1} } )

  我们设置testdb的 table1 表需要分片,根据 id 自动分片到 shard1 ,shard2,shard3 上面去。要这样设置是因为不是所有mongodb 的数据库和表 都需要分片!


bin/mongo 127.0.0.1:20000

  #使用testdb use testdb;

    #插入测试数据

  for (var i = 1; i <= 100000; i++)  db.table1.save({id:i,"test1":"testval1"});


  #查看分片情况如下,部分无关信息省掉了

  db.table1.stats();

 看到数据分到3个分片,各自分片数量为: shard1 “count” : 42183,shard2 “count”: 38937,shard3 “count” : 18880。已经成功了!不过分的好像不是很均匀,所以这个分片还是很有讲究的,后续再深入讨论。



为了充分利用3台服务器资源,缓解磁盘Io ,以上方案可以如下变通:

##############################################################

在生产环境中,可以如下部署:                                #

              10.8.10.234    10.8.10.235    10.8.10.236     #

shard1 分片       master        slaver       arbiterOnly    #

shard2 分片      arbiterOnly    master        slaver        #

shard3 分片       slaver      arbiterOnly     master        #

                                                            #                                                            

###############################################################


本文出自 “笨鸟先飞” 博客,请务必保留此出处http://2574526.blog.51cto.com/2564526/1573855

mongodb分片配置