随笔分类 -  大数据

redis高可用分布式集群

摘要：一，高可用 高可用（High Availability），是当一台服务器停止服务后，对于业务及用户毫无影响。 停止服务的原因可能由于网卡、路由器、机房、CPU负载过高、内存溢出、自然灾害等不可预期的原因导致，在很多时候也称单点问题。 （1）解决单点问题主要有2种方式： 主备方式 这种通常是一台主机、 阅读全文

posted @ 2016-09-27 12:51 hwisecn 阅读(348) 评论(0) 推荐(0) |

redis常用总结

摘要：1. 使用redis有哪些好处？ (1) 速度快，因为数据存在内存中，类似于HashMap，HashMap的优势就是查找和操作的时间复杂度都是O(1) (2) 支持丰富数据类型，支持string，list，set，sorted set，hash (3) 支持事务，操作都是原子性，所谓的原子性就是对数 阅读全文

posted @ 2016-09-27 12:34 hwisecn 阅读(544) 评论(0) 推荐(0) |

MapReduce工作原理讲解

摘要：第一部分：MapReduce工作原理 MapReduce 角色•Client ：作业提交发起者。•JobTracker: 初始化作业，分配作业，与TaskTracker通信，协调整个作业。•TaskTracker：保持JobTracker通信，在分配的数据片段上执行MapReduce任务。提交作业• 阅读全文

posted @ 2016-08-24 19:03 hwisecn 阅读(202) 评论(0) 推荐(0) |

博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3