2014年9月28日

Hadoop集群_Eclipse开发环境设置

摘要： 1、Hadoop开发环境简介1.1 Hadoop集群简介 Java版本：jdk-6u31-linux-i586.bin Linux系统：CentOS6.0 Hadoop版本：hadoop-1.0.0.tar.gz 1.2 Windows开发简介 Java版本：jdk-6u31-windows... 阅读全文

posted @ 2014-09-28 11:18 病大虫 阅读(208) 评论(0) 推荐(0)

Hadoop集群_Hadoop安装配置

摘要： 1、集群部署介绍1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用... 阅读全文

posted @ 2014-09-28 11:16 病大虫 阅读(223) 评论(0) 推荐(0)

Hadoop集群_CentOS安装配置

摘要： 1、准备安装1.1 系统简介 CentOS 是什么？ CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持（通过安全更新方式）。新版本的 CentOS 每两年发行一次，而每个版本的 Cen... 阅读全文

posted @ 2014-09-28 11:11 病大虫 阅读(165) 评论(0) 推荐(0)

Hbase配置手册

摘要： 环境: 操作系统:ubuntu 12.10 64bit jdk:sun jdk 1.6 64bit hadoop:apache hadoop 1.02 hbase：apache hbase 0.92 先决条件:配置apache hadoop append,默认这个属性是false... 阅读全文

posted @ 2014-09-28 11:06 病大虫 阅读(166) 评论(0) 推荐(0)

MapReduce 读取和操作HBase中的数据

摘要： MapReduce 中如何处理HBase中的数据？如何读取HBase数据给Map？如何将结果存储到HBase中？ 2012-07-05 13:40 89人阅读 评论(0) 收藏 举报MapReduce 中如何处理HBase中的数据？如何读取HBase数据给Map？如何将结果存储到HBase中？Map... 阅读全文

posted @ 2014-09-28 11:01 病大虫 阅读(845) 评论(0) 推荐(0)

mapreduce中实现对hbase中表数据的添加

摘要： mapreduce中实现对hbase中表数据的添加 参考网址：http://www.javabloger.com/article/hadoop-mapreduce-hbase.html 根据参考网址中的小实例，自己亲自实现了一下，记录一下自己对该程序的一些理解。 实例：先将数据文件上传到HDFS，... 阅读全文

posted @ 2014-09-28 10:59 病大虫 阅读(314) 评论(0) 推荐(0)

HBase设计与开发性能优化(转)

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，这里涉及的不多，这部分可以参考：淘宝Ken Wu同学的博客。1. 表的设计1.1 Pre-Creating Regions默认情况下，在创建HBase表的时候会自动创建一个region分区，... 阅读全文

posted @ 2014-09-28 10:55 病大虫 阅读(171) 评论(0) 推荐(0)

HBase配置性能调优(转)

摘要： 因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。配置优化zookeeper.session.timeout默认值：3分钟（180000ms）说明：RegionSer... 阅读全文

posted @ 2014-09-28 10:54 病大虫 阅读(155) 评论(0) 推荐(0)

通过Java Api与HBase交互(转)

摘要： HBase提供了Java Api的访问接口，掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要，本文将继续前两篇文章中blog表的示例，介绍常用的Api。import java.io.IOException;import org.apache.hadoop.conf.Configurati... 阅读全文

posted @ 2014-09-28 10:53 病大虫 阅读(190) 评论(0) 推荐(0)

HBase Java API类介绍

摘要： 几个相关类与HBase数据模型之间的对应关系java类HBase数据模型HBaseAdmin数据库（DataBase)HBaseConfigurationHTable表（Table)HTableDescriptor列族（Column Family)Put列修饰符（Column Qualifier）... 阅读全文

posted @ 2014-09-28 10:52 病大虫 阅读(150) 评论(0) 推荐(0)

HBase体系结构(转)

摘要： HBase的服务器体系结构遵循简单的主从服务器架构，它由HRegion服务器（HRegion Server）群和HBase Master服务器（HBase Master Server)构成。HBase Master服务器负责管理所有的HRegion服务器，而HBase中所有的服务器都是通过ZooKe... 阅读全文

posted @ 2014-09-28 10:51 病大虫 阅读(163) 评论(0) 推荐(0)

hbase shell基础和常用命令详解(转)

摘要： HBase shell的基本用法hbase提供了一个shell的终端给用户交互。使用命令hbase shell进入命令界面。通过执行 help可以看到命令的帮助信息。以网上的一个学生成绩表的例子来演示hbase的用法。namegradcoursemathartTom59787Jim48980这里gr... 阅读全文

posted @ 2014-09-28 10:50 病大虫 阅读(200) 评论(0) 推荐(0)

HBase使用场景和成功案例 (转)

摘要： HBase使用场景和成功案例有时候了解软件产品的最好方法是看看它是怎么用的。它可以解决什么问题和这些解决方案如何适用于大型应用架构，能够告诉你很多。因为HBase有许多公开的产品部署，我们正好可以这么做。本章节将详细介绍一些人们成功使用HBase的使用场景。注意：不要自我限制，认为HBase只能解决... 阅读全文

posted @ 2014-09-28 10:43 病大虫 阅读(4054) 评论(0) 推荐(0)

导航