2017年9月6日

hadoop之 Hadoop2.2.0中HDFS的高可用性实现原理

摘要: 在Hadoop2.0.0之前,NameNode(NN)在HDFS集群中存在单点故障(single point of failure),每一个集群中存在一个NameNode,如果NN所在的机器出现了故障,那么将导致整个集群无法利用,直到NN重启或者在另一台主机上启动NN守护线程。 主要在两方面影响了H 阅读全文

posted @ 2017-09-06 21:58 张冲andy 阅读(642) 评论(0) 推荐(0)

虚拟路由冗余协议VRRP

摘要: 一、VRRP简介 虚拟路由冗余协议VRRP(Virtual Router Redundancy Protocol)通过把几台路由设备联合组成一台虚拟的路由设备,将虚拟路由设备的IP地址作为用户的默认网关实现与外部网络通信。当网关设备发生故障时,VRRP机制能够选举新的网关设备承担数据流量,从而保障网 阅读全文

posted @ 2017-09-06 21:11 张冲andy 阅读(626) 评论(0) 推荐(0)

hadoop 之Hadoop生态系统

摘要: 1、Hadoop生态系统概况 Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 Hadoop的核心是HDFS和Mapreduce,hadoop2.0还包括YARN。 下图为hadoop的生态系统: 2、HDFS(Hadoop分布式文件系统) 源自于Google 阅读全文

posted @ 2017-09-06 17:39 张冲andy 阅读(389) 评论(0) 推荐(0)

Oracle NoLogging Append 方式减少批量insert的redo_size

摘要: 业务处理中,很多时候使用实表临时表处理中间结果,而实表的Insert操作缺省会记录redo log,针对此问题收集相关测试总结信息如下: 【转】 常见dml、ddl语句使用nologging选项所生成的redo和undo大小比较 DDL/DML Operations Direct-path nolo 阅读全文

posted @ 2017-09-06 12:32 张冲andy 阅读(1412) 评论(0) 推荐(0)

导航