【Mongodb】 Sharding Replica Sets 分片集群生产环境安装与介绍!

系统环境:Centos 6.5

官网手册:http://docs.mongodb.org/manual/

参阅资料:《Mongodb权威指南》《Mongodb实战》《深入学习Mongodb

由上方的官方拓扑可以看出,Sharding集群成员由ShardConfigServerRouter组成

Shard:可以是一个实例,官方推荐生产环境使用副本集Replica Set

Config Server:为三台主机,当有1台或者2台Server当机,对于用户而言,集群还是可读写的,不过集群不会再进行Chunk分裂和迁移,直到正常恢复为止。

RouterMongos进程,数量不进行限制,建议针对一个应用服务器只针对一个mongos进程。

 

下面我会进行一个模拟环境的组建,注意,实际生产环境中,每个实例都是单独的主机,每个config Server也会是单独的主机,不要陷入逻辑的思维中。


主机规划:

主机A(Shard1,由三个实例组成的Replica Sets):
10.1.2.11:27101
10.1.2.11:27102
10.1.2.11:27103
 
主机B(Shard2,由三个实例组成的Replica Sets):
10.1.2.12:27201
10.1.2.12:27202
10.1.2.12:27203
 
主机C:(三个config Server实例,一个mongos实例)
10.1.2.10:27301
10.1.2.10:27302
10.1.2.10:27303
10.1.2.10:27400(mongos)


A、B主机的操作基本一致,这里我写一遍在A上的操作。

1. 

下载并解压Mongodb二进制源码包!

最新Mongodb稳定安装包下载:http://www.mongodb.org/downloads

tar xzf mongodb-linux-x86_64-2.6.4.tgz
mv mongodb-linux-x86_64-2.6.4/usr/local/mongodb

2.为每个实例创建数据目录:

mkdir -p /data/shard1_1
mkdir -p /data/shard1_1
mkdir -p /data/shard1_1

3.创建Mongodb日志及PID文件目录

mkdir /var/log/mongodb
mkdir /var/run/mongodb

4.创建Mongodb配置文件目录,及配置合理的配置文件内容。(生产环境我建议通过配置文件来控制启动参数!这步,由于我实验每个主机开了多个实例,就不用配置文件了,大家如果是生产环境,可以参考下!)

cd /usr/local/mongodb/
mkdir etc
vim etc/mongod.conf
#Filename:mongodb.conf
#Now use options:
fork = true
port = 27101
quiet = true
replSet = sharding1
dbpath = /data/mongodb   
pidfilepath = /var/run/mongodb/mongod.pid
logpath = /var/log/mongodb/mongod.log
logappend = true
journal = true

5.配置全局环境变量:

echo"PATH=$PATH:/usr/local/mongodb/bin" >> /etc/profile

执行.  /etc/profile 可立即使当前用户生效。这样的目的是为了方便执行Mongodb相关命令!

6.启动实例:

mongod --shardsvr --replSet sharding1--port 27101 --dbpath /data/shard1_1/ --pidfilepath /var/run/mongodb/sharding1_1.pid--logpath /var/log/mongodb/sharding1_1.log --logappend –fork
 
mongod --shardsvr --replSet sharding1--port 27102 --dbpath /data/shard1_2/ --pidfilepath /var/run/mongodb/sharding1_2.pid--logpath /var/log/mongodb/sharding1_2.log --logappend –fork

mongod --shardsvr --replSet sharding1--port 27103 --dbpath /data/shard1_3/ --pidfilepath /var/run/mongodb/sharding1_3.pid--logpath /var/log/mongodb/sharding1_3.log --logappend –fork

7.初始化Shard1 Replica Set(副本集):

# mongo --port 27101
MongoDB shell version: 2.6.4
connecting to: 127.0.0.1:27101/test
> use admin
switched to db admin
>db.runCommand({"replSetInitiate" :{
... "_id":"sharding1",
... "members":[
...{"_id":1,"host":"10.1.2.11:27101"},
...{"_id":2,"host":"10.1.2.11:27102"},
...{"_id":3,"host":"10.1.2.11:27103"},
... ]}})
#执行后返回:
{
         "info": "Config now saved locally.  Shouldcome online in about a minute.",
         "ok": 1
}

8.验证Replica Sets状态:

sharding1:PRIMARY> rs.status()
{
         "set": "sharding1",
         "date": ISODate("2014-08-28T08:29:45Z"),
         "myState": 1,
         "members": [
                   {
                            "_id": 1,
                            "name": "10.1.2.11:27101",
                            "health": 1,
                            "state": 1,
                            "stateStr": "PRIMARY",
                            "uptime": 577,
                            "optime": Timestamp(1409214151, 1),
                            "optimeDate": ISODate("2014-08-28T08:22:31Z"),
                            "electionTime": Timestamp(1409214162, 1),
                            "electionDate": ISODate("2014-08-28T08:22:42Z"),
                            "self": true
                   },
                   {
                            "_id": 2,
                            "name": "10.1.2.11:27102",
                            "health": 1,
                            "state": 2,
                            "stateStr": "SECONDARY",
                            "uptime": 431,
                            "optime": Timestamp(1409214151, 1),
                            "optimeDate": ISODate("2014-08-28T08:22:31Z"),
                            "lastHeartbeat": ISODate("2014-08-28T08:29:45Z"),
                            "lastHeartbeatRecv": ISODate("2014-08-28T08:29:43Z"),
                            "pingMs": 0,
                            "syncingTo": "10.1.2.11:27101"
                   },
                   {
                            "_id": 3,
                            "name": "10.1.2.11:27103",
                            "health": 1,
                            "state": 2,
                            "stateStr": "SECONDARY",
                            "uptime": 431,
                            "optime": Timestamp(1409214151, 1),
                            "optimeDate": ISODate("2014-08-28T08:22:31Z"),
                            "lastHeartbeat": ISODate("2014-08-28T08:29:45Z"),
                            "lastHeartbeatRecv": ISODate("2014-08-28T08:29:45Z"),
                            "pingMs": 12,
                            "syncingTo": "10.1.2.11:27101"
                   }
         ],
         "ok": 1
}


B主机操作与A主机基本一致,配置完B主机后,再继续下面的操作!


主机C上的配置:

1.解压源码包

tar xzf mongodb-linux-x86_64-2.6.4.tgz
mv mongodb-linux-x86_64-2.6.4/usr/local/mongodb

2.配置config及日志目录:

mkdir -p /data/config_1
mkdir -p /data/config_2
mkdir -p /data/config_3
mkdir -p /var/log/mongodb

3.配置全局环境变量:

echo"PATH=$PATH:/usr/local/mongodb/bin" >> /etc/profile

4.启动config Server实例:

mongod --configsvr --dbpath /data/config_1/--port 27301 --logpath /var/log/mongodb/dbconfig_1.log --logappend –fork
 
mongod --configsvr --dbpath /data/config_2/--port 27302 --logpath /var/log/mongodb/dbconfig_2.log --logappend –fork
 
mongod --configsvr --dbpath /data/config_3/--port 27303 --logpath /var/log/mongodb/dbconfig_3.log --logappend –fork

5.启动mongos实例:

mongos --configdb10.1.2.10:27301,10.1.2.10:27302,10.1.2.10:27303 --port 27400 --logpath/var/log/mongodb/mongos.log --logappend –fork

注:生产环境mongos一样建议用配置文件来控制,例如:

#mongos.conf
#Options:
port =27400
fork =true
logappend= true
logpath= /var/log/mongodb/mongos.log
pidfilepath= /var/run/mongos.pid
configdb= 10.1.2.10:27301,10.1.2.10:27302,10.1.2.10:27303

6.登录mongos进程,配置Shard Cluster

# mongo --port 27400 admin
MongoDB shell version: 2.6.4
connecting to: 127.0.0.1:27400/admin
mongos>
mongos>db.runCommand({addshard:"sharding1/10.1.2.11:27101,10.1.2.11:27102,10.1.2.11:27103"});
{ "shardAdded" :"sharding1", "ok" : 1 }
mongos>db.runCommand({addshard:"sharding2/10.1.2.12:27201,10.1.2.12:27202,10.1.2.12:27203"});
{ "shardAdded" :"sharding2", "ok" : 1 }

7.验证Sharding集群状态:

mongos> sh.status()
--- Sharding Status ---
 sharding version: {
         "_id": 1,
         "version": 4,
         "minCompatibleVersion": 4,
         "currentVersion": 5,
         "clusterId": ObjectId("53fee749becfed3ca6de7051")
}
 shards:
         {  "_id" : "sharding1",  "host" :"sharding1/10.1.2.11:27101,10.1.2.11:27102,10.1.2.11:27103" }
         {  "_id" : "sharding2",  "host" :"sharding2/10.1.2.12:27201,10.1.2.12:27202,10.1.2.12:27203" }
 databases:
         {  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }
         {  "_id" : "test",  "partitioned" : false,  "primary" : "sharding2" }
 
mongos>

至此,全部的环境建制完毕!


附:下面提一点关于分片的操作:

激活数据库分片:
db.runCommand({enablesharding:"dbname"})  //这里要在admin数据库下操作
或 sh.enableSharding(“dbname”)   //这个可以全局操作
 
Collection启用分片(这里要选取一个shard key,详细介绍请参照官网):
db.runCommand({shardcollection:"dbname.collectionname",key{_id:1}})  //同上!
或 sh.shardCollection( "records.active", { a:"hashed" } )


本文出自 “贵在坚持_IT博客” 博客,请务必保留此出处http://fdgui.blog.51cto.com/3484207/1546290

郑重声明:本站内容如果来自互联网及其他传播媒体,其版权均属原媒体及文章作者所有。转载目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。