|
摘要：
利用Cloudera实现Hadoop - Ubuntu中文利用Cloudera实现Hadoop[编辑] 前言 Hadoop 是一个实现了 MapReduce 计算模型的开源分布式并行编程框架。MapReduce的概念来源于Google实验室，它是一个简化并行计算的编程模型，适用于大规模集群上的海量数据处理，目前最成功的应用是分布式搜索引擎。随着2007年底该模式Java开源实现项目Apache ... 阅读全文
posted @ 2012-03-10 22:43
lexus
阅读(414)
评论(0)
推荐(1)
摘要：
Hadoop应用测试_Just Do it!_百度空间Hadoop应用测试2009年07月16日 星期四 13:18Hadoop部署完成后，进行示例测试。hadoop-0.18.3目录下包含了hadoop-0.18.3-examples.jar，里面包含很多示例。下面测试一下最著名的wordcount。开启HDFS，如下：$ cd /home/howard/hadoop-0.18.3$ bin/h... 阅读全文
posted @ 2012-03-10 22:14
lexus
阅读(195)
评论(0)
推荐(0)
摘要：
[shell] AWK筆記 | Toknow Blog[shell] AWK筆記[shell] AWK筆記Posted on 2011/12/31 by angus計算web log IP次數?1awk '{++ip[$1]}END{for(key in ip) print key,ip[key]}' accesslog忽略空字串資料?1awk '{if($2 !~ /^[ ]*$/) pri... 阅读全文
posted @ 2012-03-10 22:13
lexus
阅读(165)
评论(0)
推荐(0)
摘要：
is not in sudoer file首需要切换到root身份$su -(注意有- ，这和su是不同的，在用命令"su"的时候只是切换到root，但没有把root的环境变量传过去，还是当前用户的环境变量，用"su -"命令将环境变量也一起带过去，就象和root登录一样)然后$visudo //切记，此处没有vi和sudo之间没有空格1、移动光标，到最后一行2、按a，进入append模式3、输入... 阅读全文
posted @ 2012-03-10 22:02
lexus
阅读(482)
评论(0)
推荐(0)
摘要：
在Cent OS中为用户添加sudo权限 | WayCent OS添加用户到sudoer列表中 Linux默认是没有将用户添加到sudoers列表中的，需要root手动将账户添加到sudoers列表中，才能让普通账户执行sudo命令。root账户键入visudo即可进入sudo配置，这个命令要比vim /etc/sudoers要好很多，因为使用visudo进行sudo配置，将会得到很多提示.键入v... 阅读全文
posted @ 2012-03-10 22:01
lexus
阅读(567)
评论(0)
推荐(0)
摘要：
hadoop 起动是的时候报错 localhost: Could not create the Java virtual machine._far beyond me,thks~~_百度空间hadoop 起动是的时候报错 localhost: Could not create the Java virtual machine.2011-11-14 1:11，但是昨天晚上根据官方文档配置单节点的时候... 阅读全文
posted @ 2012-03-10 21:43
lexus
阅读(542)
评论(0)
推荐(0)
摘要：
在REHL 5.5 X64下安装64位JDK - gooooooooal的专栏 - 博客频道 - CSDN.NET 在REHL 5.5 X64下安装64位JDK 1 chmod +x jdk-6u21-linux-x64-rpm.bin 2 ./jdk-6u21-linux-x64-rpm.bin此时会生成文件jdk-6u21-linux-amd64.rpm 3 mv jdk-6u21-linu... 阅读全文
posted @ 2012-03-10 21:40
lexus
阅读(275)
评论(0)
推荐(0)
摘要：
使用 Python SimpleHTTPServer 快速共享文件Blog -7-by Seven Du使用 Python SimpleHTTPServer 快速共享文件pythonFri May 28 07:01:31 -0700 2010今天，朋友要我给它传一些照片和几个视频文件。使用QQ传了几个照片，但视频实在是太慢了。便想用HTTP。我启动了 Mac 上的 Web sharing(它会启... 阅读全文
posted @ 2012-03-10 20:29
lexus
阅读(462)
评论(0)
推荐(0)
摘要：
淘宝开放平台博客 » 单台服务器上安装Hadoop和Hive十五分钟教程单台服务器上安装Hadoop和Hive十五分钟教程单台服务器上学习Hadoop和Hive十分钟教程Hadoop是个很流行的分布式计算解决方案，Hive是基于hadoop的数据分析工具。一般的学习者不是太容易找到多台服务器来做集群学习hadoop，所以hadoop官方文档提供了在单台服务器上运行hadoop的指南（hive是基于... 阅读全文
posted @ 2012-03-10 16:03
lexus
阅读(593)
评论(0)
推荐(0)
摘要：
Hbase 学习笔记[1] 安装及配置 - Debugcool - 博客园Hbase 学习笔记[1] 安装及配置注：Hbase学习笔记这一系列文章仅仅代表小菜个人的见解，写的目的也纯粹是为了日后方便查看，其中有什么错误，欢迎各位前辈、大侠指出，小菜感激不尽。 阅读全文
posted @ 2012-03-10 15:33
lexus
阅读(200)
评论(0)
推荐(0)
摘要：
HBase入门笔记（四）--完全分布式HBase集群安装配置 - 林场 - 博客园HBase入门笔记（四）--完全分布式HBase集群安装配置 HBase 是一个开源的非关系(NoSQL)的可伸缩性分布式数据库。它是面向列的，并适合于存储超大型松散数据。HBase适合于实时，随机对Big数据进行读写操作的业务环境。关于HBase的更多介绍请参见HBase项目官网。 本文环境与上一讲--完全分布... 阅读全文
posted @ 2012-03-10 13:17
lexus
阅读(269)
评论(0)
推荐(0)
摘要：
Hbase配置手册 - 奔跑的羚羊 - ITeye技术网站Hbase配置手册 博客分类：hadoopHBaseHadoopJavazkXMLHbase配置手册 1）下载hbase 解压到每台服务器的/data/soft 解压Java代码 root@master:/data/soft#tarzxvfhbase-0.90.0.tar.gzroot@master:/data/soft# tar zxv... 阅读全文
posted @ 2012-03-10 13:14
lexus
阅读(182)
评论(0)
推荐(0)
摘要：
Hbase配置手册 - 奔跑的羚羊 - ITeye技术网站Hbase配置手册 博客分类：hadoopHBaseHadoopJavazkXMLHbase配置手册 1）下载hbase 解压到每台服务器的/data/soft 解压Java代码 root@master:/data/soft#tarzxvfhbase-0.90.0.tar.gzroot@master:/data/soft# tar zxv... 阅读全文
posted @ 2012-03-10 13:14
lexus
阅读(593)
评论(0)
推荐(0)
摘要：
搭建Hive平台 - 逖靖寒 - 博客园搭建Hive平台Hive是一个基于Hadoop的数据仓库平台。通过hive，我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言：HQL，能够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。本文讲解如何搭建一个Hive平台。假设我们有3台机器：hadoop1,hadoop2,hadoop3。并且都安装好了Hadoo... 阅读全文
posted @ 2012-03-10 13:02
lexus
阅读(201)
评论(0)
推荐(0)
摘要：
搭建Hive平台 - 逖靖寒 - 博客园搭建Hive平台Hive是一个基于Hadoop的数据仓库平台。通过hive，我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言：HQL，能够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。本文讲解如何搭建一个Hive平台。假设我们有3台机器：hadoop1,hadoop2,hadoop3。并且都安装好了Hadoo... 阅读全文
posted @ 2012-03-10 13:02
lexus
阅读(206)
评论(0)
推荐(0)
摘要：
HBase分布式安装手册_鸿彬_新浪博客HBase分布式安装手册一、安装准备1、下载HBASE 0.20.5版本：http://www.apache.org/dist/hbase/hbase-0.20.5/2、JDK版本：jdk-6u20-linux-i586.bin3、操作系统：Linux s132 2.6.9-78.8AXS2smp #1 SMP Tue Dec 16 02:42:55 EST... 阅读全文
posted @ 2012-03-10 12:59
lexus
阅读(202)
评论(0)
推荐(0)
摘要：
easy-hadoop - EasyHadoop, Rapid Hadoop Programming - Google Project HostingEasyHadoop is a collection of ruby scripts to quickly achieve basic things (such as extracting certain columns from the datas... 阅读全文
posted @ 2012-03-10 12:43
lexus
阅读(172)
评论(0)
推荐(0)
摘要：
布鲁 » nutch1.1导入eclipse中运行nutch1.1导入eclipse中运行2012年1月7日 | 标签: Hadoop, Java, Linux, solr, Ubuntu最近在开始研究nutch刚把它在eclipse中跑起来，方便研究源码吧。本文针对的是nutch1.1版本。如有不对的地方欢迎指证。直接导入eclipse.1.首先下载nutch的最新版本,http://apac... 阅读全文
posted @ 2012-03-10 10:35
lexus
阅读(324)
评论(0)
推荐(0)
摘要：
绚丽也尘埃 » 快速部署Hadoop Cluster快速部署Hadoop ClusterAugust 9th, 2010 绚丽也尘埃 Leave a comment Go to comments在开发环境经常需要部署Hadoop集群，如果每次都手工去做，显得非常繁琐，并且容易犯错。所以我想着使用Python写一个脚本，通过简单的配置文件，运行这个脚本就能部署一个Hadoop集群。这个集群使用的Ha... 阅读全文
posted @ 2012-03-10 10:20
lexus
阅读(517)
评论(0)
推荐(0)
摘要：
星空下: 编译／部署hadoop 0.23编译／部署hadoop 0.23 /标签： Hadoop, YARN 下载hadoop 0.23版本，建议使用SVNsvn checkout http://svn.apache.org/repos/asf/hadoop/common/tags/release-0.23.0-rc0/进入release-0.23.0-rc0，查看INSTALL.TXT，... 阅读全文
posted @ 2012-03-10 10:18
lexus
阅读(559)
评论(0)
推荐(0)
|
浙公网安备 33010602011771号