海量数据拆分到nosql系统的一种方案

获取某用户的好友最新动态。

我们大体上来说先按照用户ID将用户的好友一致性哈希到几个mongodb集群,然后把用户的最新信息也存储到mongodb中。然后利用消息系统保持数据库中的数据和mongdb中的数据一致。当用户获取这个列表的时候我们先获取好友然后批量获取好友的最新信息最后排序返回。

目前该解决方案投入mongodb服务器9台,获取好友服务器7台共16台服务器,数据总量在3.6亿左右,每获取100个好友花费10ms。

部署图

活动图

序列图

posted @ 2013-12-03 16:55  李占卫  阅读(588)  评论(0编辑  收藏  举报