10 2014 档案

摘要:MapReduce架构与生命周期 概述:MapReduce是hadoop的核心组件之一,可以通过MapReduce很容易在hadoop平台上进行分布式的计算编程。本文组织结果如下:首先对MapReduce架构和基本原理进行概述,其次对整个MapReduce过程的生命周期进行详细讨论。 参考文献:董西城的《Hadoop技术内幕》以及若干论坛文章,无法考证出处。 MapReduce架构和... 阅读全文
posted @ 2014-10-30 19:55 CQUMonk 阅读(1230) 评论(0) 推荐(0)
摘要:实验环境基本配置硬件:硬盘单节点50GB,1G内存,单核。 操作系统:CentOS6.4 64bit Hadoop:2.20 64bit(已编译) JDK:jdk1.7 磁盘分区: /5GB/boot100MB/usr5GB/tmp500MBswap2GB/var1GB/home剩余空间Linux系... 阅读全文
posted @ 2014-10-12 16:54 CQUMonk 阅读(1066) 评论(0) 推荐(1)
摘要:IP地址IP地址是由32位或者128位无符号数表示的网络层通信地址,是一种低级协议,TCP和UDP协议都是在它的基础上构建的。Java中使用InetAddress来表示IP地址,它有两个子类Inet4Address和Inet6Address,分别表示IPV4和IPV6。 getByName()方法通... 阅读全文
posted @ 2014-10-06 16:04 CQUMonk 阅读(396) 评论(0) 推荐(0)
摘要:IO流用来处理设备间数据传输,java对数据的操作是通过流的方式,而这些操作流的对象被封装在IO包中。流可以分为字符流和字节流。字符流可以设置编码方式,这就使得处理文本更加方便。 IO常用基类字节流抽象基类InputStream,OutputStream。字符流抽象基类Reader,Writer。 ... 阅读全文
posted @ 2014-10-04 17:05 CQUMonk 阅读(391) 评论(0) 推荐(0)