10，mongodb 分片

1，

复制集数据是一样的，就是个备份。

2，分片

 

1:在3台独立服务器上,分别运行 27017,27018,27019实例, 互为副本集,形成3套repl set

2: 在3台服务器上,各配置config server, 运行27020端口上

 

3: 配置mongos路由器

./bin/mongos --port 30000 \

 --dbconfig 192.168.1.201:27020,192.168.1.202:27020,192.168.1.203:27020

 

4:连接路由器

./bin/mongo --port 30000

5: 添加repl set为片，交给configsvr 管理

>sh.addShard(‘192.168.1.201:27017’);

>sh.addShard(‘192.168.1.202:27017’);

>sh.addShard(‘192.168.1.203:27017’);

如果增加复制集到片上就是如下操作：

 

 

6, 添加待分片的库

>sh.enableSharding(databaseName);

7: 添加待分片的表

>sh.shardCollection(‘dbName.collectionName’,{field:1});

 

Field是collection的一个字段,系统将会利用filed的值,来计算应该分到哪一个片上.

这个filed叫”片键”, shard key

8,

mongodb不是从单篇文档的级别,绝对平均的散落在各个片上,

而是N篇文档, 形成一个块"chunk", 优先放在某个片上, 当这片上的chunk, 比另一个片的chunk, 区别比较大时, (>=3) , 会把本片上的chunk, 移到另一个片上, 以chunk为单位, 维护片之间的数据均衡

问: 为什么插入了10万条数据,才2个chunk?

答: 说明chunk比较大(默认是64M), 在config数据库中,修改chunksize的值.

 

问: 既然优先往某个片上插入,当chunk失衡时,再移动chunk,自然,随着数据的增多,shard的实例之间,有chunk来回移动的现象,这将带来什么问题?

答: 服务器之间IO的增加,

 

接上问: 能否我定义一个规则, 某N条数据形成1个块,预告分配M个chunk,

M个chunk预告分配在不同片上. 以后的数据直接入各自预分配好的chunk,不再来回移动?

 

答: 能, 手动预先分片!

9,

以shop.user表为例

1: sh.shardCollection(‘shop.user’,{userid:1}); //user表用userid做shard key

2: for(var i=1;i<=40;i++) { sh.splitAt('shop.user',{userid:i*1000}) } // 预先在1K 2K...40K这样的界限切好chunk(虽然chunk是空的), 这些chunk将会均匀移动到各片上.

3: 通过mongos添加user数据. 数据会添加到预先分配好的chunk上, chunk就不会来回移动了.

10,

注:replication中,每台机器存储的内容是一致的,而sharding中,每台机器存储数据的一部分

手动预先分片：