摘要: 一、API的配置---Configuration类API的配置:Hadoop提供了专门的API对资源进行配置,Configuration类的实例(在org.apache.hadoop.conf包)包括配置属性及其值的集合。每个属性是一个String类型,值的类型可能是以以下的多种类型:包括了Java... 阅读全文
posted @ 2015-05-11 16:18 Hugokchen 阅读(259) 评论(0) 推荐(0) 编辑
摘要: 一、数据完整性二、压缩三、序列化基本概念序列化指的是将结构化对象转化为字节流以便于通过网络进行传输或写入持久化存储的过程反序列化指的是将字节流转为一系列结构化对象的过程。进程间通信和持久存储--分布式数据处理过程,出现序列化和反序列两个动作RPC是hadoop用于节点之间的进程间的通信,RPC协议使... 阅读全文
posted @ 2015-05-11 15:08 Hugokchen 阅读(250) 评论(0) 推荐(0) 编辑