随笔分类 -  大数据

大数据
摘要:结合最近研究和工作中用到的,面试中也经常会被问到的大数据做一个系列整理,此为第一篇 分区分表分库篇。 分区 定义:就是把一张表的数据分成N个区块,在逻辑上看最终只是一张表,但底层是由N个物理区块组成的。就比如一张表就是一本书。当要在一本书中查找某项内容时,如果不分章节,查找的效率将会下降。而同理,在 阅读全文
posted @ 2017-09-05 14:17 关关雎鸠,在广州 阅读(1264) 评论(0) 推荐(1)
摘要:首先,谢谢各位大神的指点。结合工作中遇到的问题和目前我了解到的分布式处理方案来简单谈谈。 1.事务的特性 事务必须满足传统事务的ACID特性,即原子性,一致性,分离性和持久性。 原子性:即最小单位的原子,要不全部成功,要不全部失败。 一致性:。事务必须始终保持系统处于一致的状态,不管在任何给定的时间 阅读全文
posted @ 2017-08-29 15:43 关关雎鸠,在广州 阅读(255) 评论(0) 推荐(0)
摘要:Redis mongoDB memcache 性能 都比较高,性能对我们来说应该都不是瓶颈。 操作的便利性 稍微丰富一点,提供list,set, hash 等数据结构的存储 最像关系型数据库,数据类型非常丰富 memcache 数据结构单一。(key-value) 内存大小和数据量大小 Redis可 阅读全文
posted @ 2016-10-27 18:19 关关雎鸠,在广州 阅读(272) 评论(0) 推荐(0)