随笔分类 -  大数据

摘要:Quorum Journal Manager实现高可用 主备 HDFS高可用性功能通过提供在具有热备用的主动/被动配置中在同一群集中运行两个冗余NameNode的选项来解决。这样可以在机器崩溃的情况下快速故障转移到新的NameNode,或者出于计划维护的目的由管理员发起的正常故障转移。在典型的HA群 阅读全文
posted @ 2020-02-29 17:49 得记点什么了 阅读(411) 评论(0) 推荐(0)
摘要:公司要开搞大数据了,针对大数据的一般姿势做了个简单调研。 一、通用架构 二、组件选择 1、Hdfs、HBase Hdfs:分布式文件存储,无缝对接所有大数据相关组件。高容错(多副本)、高吞吐。适合一次写入,多次读出。不适合低延迟读取、小文件存储(寻址时间超过读取时间)。 HBase:非关系型分布式数 阅读全文
posted @ 2020-02-21 20:56 得记点什么了 阅读(2874) 评论(0) 推荐(0)