10 2014 档案
摘要:MapReduce架构与生命周期
概述:MapReduce是hadoop的核心组件之一,可以通过MapReduce很容易在hadoop平台上进行分布式的计算编程。本文组织结果如下:首先对MapReduce架构和基本原理进行概述,其次对整个MapReduce过程的生命周期进行详细讨论。 参考文献:董西城的《Hadoop技术内幕》以及若干论坛文章,无法考证出处。 MapReduce架构和...
阅读全文
摘要:实验环境基本配置硬件:硬盘单节点50GB,1G内存,单核。 操作系统:CentOS6.4 64bit Hadoop:2.20 64bit(已编译) JDK:jdk1.7 磁盘分区: /5GB/boot100MB/usr5GB/tmp500MBswap2GB/var1GB/home剩余空间Linux系...
阅读全文
摘要:IP地址IP地址是由32位或者128位无符号数表示的网络层通信地址,是一种低级协议,TCP和UDP协议都是在它的基础上构建的。Java中使用InetAddress来表示IP地址,它有两个子类Inet4Address和Inet6Address,分别表示IPV4和IPV6。 getByName()方法通...
阅读全文
摘要:IO流用来处理设备间数据传输,java对数据的操作是通过流的方式,而这些操作流的对象被封装在IO包中。流可以分为字符流和字节流。字符流可以设置编码方式,这就使得处理文本更加方便。 IO常用基类字节流抽象基类InputStream,OutputStream。字符流抽象基类Reader,Writer。 ...
阅读全文