李玉龙

摘要： google的3篇论文 raft 其他协议 阅读全文

摘要： Bigtable：一个分布式的结构化数据存储系统 摘要 Bigtable是一个管理结构化数据的分布式存储系统，它被设计用来处理海量数据：分布在数千台通用服务器上的PB级的数据。Google的很多项目将数据存储在Bigtable中，包括Web索引、Google Earth、Google Finance 阅读全文

摘要： 摘要 我们设计并实现了Google文件系统，一个面向分布式数据密集型应用的、可伸缩的分布式文件系统。虽然运行在廉价的日用硬件设备上，但是它依然了提供容错功能，为大量客户机提供了很高的总体性能。 虽然与很多之前的分布式文件系统有很多相同目标，但是，我们的设计已经受应用的负载情况和技术环境影响，现在以及 阅读全文

摘要： HIVE和HBASE区别 1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够 阅读全文

摘要： 区分 hdfs hbase hive hbase适用场景 收藏 八戒_o 发表于 11个月前 阅读 308 收藏 1 点赞 0 评论 0 区分 hdfs hbase hive hbase适用场景 收藏 八戒_o 发表于 11个月前 阅读 308 收藏 1 点赞 0 评论 0 收藏 收藏 八戒_o 发 阅读全文

摘要： Hbase:Hbase是Hadoop的数据库，是bigtable的实现，基于HDFSHDFS：文件系统，是gfs的实现 Hive,Hbase,HDFS等之间的关系Hive：Hive不支持更改数据的操作，Hive基于数据仓库，提供静态数据的动态查询。其使用类SQL语言，底层经过编译转为MapReduc 阅读全文

摘要： http://thesecretlivesofdata.com/raft/ 阅读全文

摘要： NWR是一种在分布式存储系统中用于控制一致性级别的一种策略。在Amazon的Dynamo云存储系统中，就应用NWR来控制一致性。 让我们先来看看这三个字母的含义：N：在分布式存储系统中，有多少份备份数据W：代表一次成功的更新操作要求至少有w份数据写入成功R： 代表一次成功的读数据操作要求至少有R份数 阅读全文

摘要： 这个算法有几个问题： 1条记录存9份 一主一备时 1.主同步到备异步: 主挂掉时，未同步到备的数据会丢失 2. 主同步到备同步：主挂掉时，未写入备的数据全部丢失，但是前端会感知到写失败，因此是可行的。但是主备切换后，需要仲裁丢掉之前的主的数据 一主多备时 1. 主同步到备k个就算成功。。。 使用时间 阅读全文

摘要： drools 规则引擎 cobbler 自动化系统部署 ansible 自动运维框架 Sonar 代码质量管理工具 阅读全文