Armin
迷茫的话 TRY AGAIN 多少次都能重新再来

随笔分类 -  hadoop

hadoop_集群安装_2
摘要:这篇文章主要介绍的是,如何通过linux中的配置文件,对主机的IP地址进行修改, 以及为了方便与host 主机进行文件的传输,而安装vmtools的操作步骤 阅读全文
posted @ 2014-03-06 12:15 Armin 阅读(286) 评论(0) 推荐(0)
hadoop_集群安装_1
摘要:这篇文章是安装hadoop的准备工作, 主要介绍的是 基于VMware 虚拟机的linux 的安装 以及 VMware-tools 的安装过程 阅读全文
posted @ 2014-03-06 12:14 Armin 阅读(401) 评论(0) 推荐(0)
使用RPC 调用NameNode中的方法
摘要:这篇文章 主要介绍,通过RPC调用,自己实现Client端的类代码 间接地调用系统中正在运行的 hadoop集群中的NameNode 中的方法和属性值。 阅读全文
posted @ 2014-01-15 18:27 Armin 阅读(1816) 评论(0) 推荐(0)
1_使用Java文件的并发写
摘要:codes for parallel testing 阅读全文
posted @ 2014-01-05 22:02 Armin 阅读(2361) 评论(0) 推荐(0)
hadoop_并行写操作思路_2
摘要:使用伪码的表示如何对 hadoop的源代码进行修改 以实现并发写操作。 阅读全文
posted @ 2013-12-04 17:22 Armin 阅读(705) 评论(0) 推荐(0)
hadoop_并行写操作思路
摘要:这篇文章主要介绍的是,Hadoop的Client端在执行Create操作的时候, 进行的一系列操作与类之间的调用关系。 阅读全文
posted @ 2013-12-03 21:13 Armin 阅读(1249) 评论(0) 推荐(0)
Hadoop_Block的几种状态_DataNode
摘要:介绍的是 Hadoop 2.0 引入了 append 功能之后 为了确保数据的一致性与持久性而在 Datanode的block新增的状态。 阅读全文
posted @ 2013-12-03 17:28 Armin 阅读(1667) 评论(0) 推荐(0)
Hadoop的读写类调用关系_图示
摘要:use graph describe relationships between hadoop's classes when execute write or read operations 阅读全文
posted @ 2013-11-29 09:01 Armin 阅读(135) 评论(0) 推荐(0)
hadoop-0.20-集群搭建___实体机通过SSH访问基于VM安装的Linux
摘要:这篇文章是介绍如何搭建hadoop-0.20-集群搭建的文档 1 主要介绍了,在搭建环境之前,如何使得SSH与 VM进行通信的, 为了后续传输软件包和开发文件的导入导出。 阅读全文
posted @ 2013-11-03 17:48 Armin 阅读(539) 评论(0) 推荐(0)
基于hadoop集群的hive 安装(mysql,derby)
摘要:本文主要内容是笔者进行基于hadoop集群安装hive时, 使用的命令, 以及配置文件的调配, 和遇到的一些问题。 阅读全文
posted @ 2013-02-14 11:53 Armin 阅读(5554) 评论(0) 推荐(2)