摘要： Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 Hadoop的核心是HDFS和Mapreduce，hadoop2.0还包括YARN。 下图为hadoop的生态系统： 2、HDFS（Hadoop分布式文件系统） 源自于Google的GFS论文，发表于2003年 阅读全文

摘要： JobTracker 对应于 NameNode TaskTracker 对应于 DataNode DataNode 和NameNode 是针对数据存放来而言的 JobTracker和TaskTracker是对于MapReduce执行而言的 mapreduce中几个主要概念，mapreduce整体上可 阅读全文

摘要： Hadoop集群中有三种作业调度算法，分别为FIFO，公平调度算法和计算能力调度算法先来先服务（FIFO）Hadoop中默认的调度器FIFO，它先按照作业的优先级高低，再按照到达时间的先后选择被执行的作业。FIFO比较简单，hadoop中只有一个作业队列，被提交的作业按照先后顺序在作业队列中排队，新 阅读全文

摘要： NameNode将对文件系统的改动追加保存到本地文件系统上的一个日志文件（edits）。当一个NameNode启动时，它首先从一个映像文件（fsimage）中读取HDFS的状态，接着应用日志文件中的edits操作。然后它将新的HDFS状态写入（fsimage）中，并使用一个空的 edits文件开始正 阅读全文

摘要： Twitter Storm中Topology的状态 状态转换如下,Topology 的持久化状态包括： active, inactive, killed, rebalancing 四个状态。 代码上看到每种状态都可以转换成一些持久化 ( 写入到 zk 中的状态 ) 或者中间状态。 Java代码 (d 阅读全文

摘要： 一、 安装storm要先本机搭建好zookeeper集群（手动目录安装或者CDH安装） 二、 Java 6 Python 2.6.6 unzip（针对使用语言要安装好相应环境 比如java 要JDK和unzip） 三、安装两个strom依赖的消息队列包 ZeroMQ安装： wget http://d 阅读全文

摘要： Java代码 # cd /usr/bin # ln -s -f /usr/java/jdk1.6.0_24/jre/bin/java # ln -s -f /usr/java/jdk1.6.0_24/bin/javac 2. Remove the old empty java environment 阅读全文

摘要： 转载地址：http://blog.csdn.net/dengshengjin2234/article/details/8502097 1、适配器模式：ListView或GridView的Adapter 简介：不同的数据提供者使用一个适配器来向一个相同的客户提供服务。 2、建造者模式：AlertDia 阅读全文

摘要： public class BinarySearchClass { public static int binary_search(int[] array, int value) { int beginIndex = 0;// 低位下标 int endIndex = array.length - 1; 阅读全文

摘要： 在显示的“窗口和文本外观”中找到“字符编码”。 阅读全文