|
摘要：
如何控制Yahoo! Slurp蜘蛛的抓取频度_国外博客资源站_百度空间如何控制Yahoo! Slurp蜘蛛的抓取频度2009年08月13日 星期四 5:56上周末豆瓣的阿北给我电话：最近你们雅虎的蜘蛛（Yahoo! Slurp）对豆瓣网的抓取频度非常高，导致服务器的速度有些慢，如何才能让Slurp降低抓取频度呢？我首先想到的建议是在网站的robots.txt中增加Crawl-delay: 设置，... 阅读全文
posted @ 2012-03-11 14:50
lexus
阅读(292)
评论(0)
推荐(0)
摘要：
http://pipes.yahoo.com 阅读全文
posted @ 2012-03-11 13:57
lexus
阅读(158)
评论(0)
推荐(0)
摘要：
Paxos在大型系统中常见的应用场景 – Tim[后端技术]Paxos在大型系统中常见的应用场景Wednesday, Sep 23rd, 2009 by Tim | Tags: chubby, paxos, zookeeper在分布式算法领域，有个非常重要的算法叫Paxos, 它的重要性有多高呢，Google的Chubby [1]中提到all working protocols for asy... 阅读全文
posted @ 2012-03-11 13:47
lexus
阅读(246)
评论(0)
推荐(0)
摘要：
hadoop+hbase+zookeeper集群安装方法 - mary的博客 - 51CTO技术博客hadoop+hbase+zookeeper集群安装方法2011-08-02 15:31:03标签：hadoop hbase zookeeper原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://marysee.blog.51cto.... 阅读全文
posted @ 2012-03-11 13:39
lexus
阅读(333)
评论(0)
推荐(0)
摘要：
hadoop+zookeeper+hbase安装_dekar_x的空间_百度空间hadoop+zookeeper+hbase安装2011-05-27 14:34一 机器192.168.0.203 hd203： hadoop namenode & hbase HMaster192.168.0.204 hd204： hadoop datanode & hbase HRegionServer & zoo... 阅读全文
posted @ 2012-03-11 13:23
lexus
阅读(545)
评论(0)
推荐(0)
摘要：
以下是我实际在虚拟机中测试完成的例子，使用easy_hadoop的bash脚本需要改两个路径 ，还有pig的路径，使用８.1的stable版本部署完成之后，要注意使用hadoop这个账号来运行mkdir input && cd inputecho "aa" >1.txtecho "bb" >> 1.txtecho "aa" >> 1.txtecho "zz" >2.txt 352 bin/hado... 阅读全文
posted @ 2012-03-11 12:57
lexus
阅读(768)
评论(2)
推荐(0)
摘要：
Hadoop 分布式部署 - Coding岸 - 博客园Hadoop 分布式部署 开始着手学习hadoop了，撇开对hadoop的认识，面对的第一个问题幷是hadoop的分布式部署，网上有很多教程，按照这些教程来却或多或少有些不顺利的地方。在此详细的记录下自己的安装过程。 服务器操作系统是CentOS6，部署的hadoop版本是0.20.2，共十台服务器，node1~node10。其中node1... 阅读全文
posted @ 2012-03-11 12:38
lexus
阅读(343)
评论(0)
推荐(0)
摘要：
p运行Hadoop作业时一处常见错误以及解决方法 | 董的博客-0229运行Hadoop作业时一处常见错误以及解决方法Category: Hadoop-MapReduceView: 172 阅 Author: Dong 【写在前面】THU的Jie Fu同学遇到了该问题，通过我们的邮件交流解决了该问题。 个人感觉该问题比较普遍，于是整理此文。1.问题描述当用户编写完Hadoop程序时，准备运行时... 阅读全文
posted @ 2012-03-11 12:36
lexus
阅读(886)
评论(0)
推荐(0)
摘要：
『Bash Script』忽略权限问题-强制修改保存普通用户只读文件_knityster -=编织者=-_百度空间『Bash Script』忽略权限问题-强制修改保存普通用户只读文件2010年08月30日 星期一 9:32使用场景： 当普通用户使用vi修改需要root权限当文件时，会以只读属性加载文件，修改后无法保存。 ---->Linux修复模式默认以只读属性挂载当前系统分区，使用该方法可以方便... 阅读全文
posted @ 2012-03-11 12:30
lexus
阅读(289)
评论(0)
推荐(0)
摘要：
Mass Data ProcessingMass Data Processing/Cloud Computing Summer 2011Instructor: Hongfei Yan, Bo Peng | Home | Basic Information | Schedule | | Assignments | Resources | Announcements:NEW: Fi... 阅读全文
posted @ 2012-03-11 11:31
lexus
阅读(281)
评论(0)
推荐(0)
摘要：
Hadoop安装后的集群基准测试 - edwardking888的个人空间 - ITPUB个人空间 - powered by X-SpaceHadoop安装后的集群基准测试上一篇 / 下一篇 2011-01-18 19:09:03/ 个人分类：hadoop查看( 488 ) / 评论( 3 ) / 评分( 0 / 1 )一旦创建Hadoop集群并开始运行，我们需要给予用户权限使用它。这就是需要为每... 阅读全文
posted @ 2012-03-11 11:21
lexus
阅读(412)
评论(0)
推荐(0)
摘要：
业务开发测试HBase之旅三：通过Java Api与HBase交互 » Taobao QA Team业务开发测试HBase之旅三：通过Java Api与HBase交互 2011年10月11日 由 yedu 留言 » 引言 HBase提供了Java Api的访问接口，掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要，本文将继续前两篇文章中blog表的示例，介绍常用的Api。 练习前的... 阅读全文
posted @ 2012-03-11 11:05
lexus
阅读(358)
评论(0)
推荐(0)
摘要：
Running Hadoop On Ubuntu Linux (Single-Node Cluster) @ Michael G. NollCookie Monster For XMLHttpRequestRunning Hadoop On Ubuntu Linux (Multi-Node Cluster)Running Hadoop On Ubuntu Linux (Single-Node Cl... 阅读全文
posted @ 2012-03-11 11:04
lexus
阅读(199)
评论(0)
推荐(0)
摘要：
Hadoop Streaming 编程 | 董的博客Hadoop Streaming 编程Category: Hadoop-MapReduceView: 5,678 阅 Author: Dong 1、概述Hadoop Streaming是Hadoop提供的一个编程工具，它允许用户使用任何可执行文件或者脚本文件作为Mapper和Reducer，例如：采用shell脚本语言中的一些命令作为mappe... 阅读全文
posted @ 2012-03-11 10:42
lexus
阅读(308)
评论(0)
推荐(0)
摘要：
HBase vs Cassandra: 我们迁移系统的原因 » 我有分寸HBase vs Cassandra: 我们迁移系统的原因 March 25th, 2010 by gnawux Leave a reply » 原文: http://ria101.wordpress.com/2010/02/24/hbase-vs-cassandra-why-we-moved/ 原作者：Dominic W... 阅读全文
posted @ 2012-03-11 10:34
lexus
阅读(246)
评论(0)
推荐(0)
摘要：
环境变量设置set env export-Fedora Centos日志-我的搜狐Important CDH3 requires the Oracle JDK 1.6.0_8 at a minimum. Cloudera recommends version 1.6.0_26. Before installing and deploying CDH: 刪 Make sure you have th... 阅读全文
posted @ 2012-03-11 09:59
lexus
阅读(368)
评论(0)
推荐(0)
摘要：
HBase Java客户端编程 | 量子数科院HBase Java客户端编程发表于 2011 年 07 月 22 日 由 jiuling.ypf本文以HBase 0.90.2为例，介绍如何在Windows系统，Eclipse IDE集成环境下，使用Java语言，进行HBase客户端编程，包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。 1. 准备工作1、下载后安装jdk包（这里使用... 阅读全文
posted @ 2012-03-11 09:44
lexus
阅读(269)
评论(0)
推荐(0)
摘要：
HBase在数据统计应用中的使用心得 - 大圆那些事 - 博客园HBase在数据统计应用中的使用心得1. 数据统计的需求互联网上对于数据的统计，一个重要的应用就是对网站站点数据的统计，例如CNZZ站长统计、百度统计、Google Analytics、量子恒道统计等等。网站站点统计工具无外乎有以下一些功能：1）网站流量统计：包括PV、UV、IP等指标，这些统计指标可以以趋势图的形式展示出来，如最近一... 阅读全文
posted @ 2012-03-11 09:43
lexus
阅读(471)
评论(0)
推荐(0)
摘要：
» 关于HBase的一些零碎事 江边潮未尽，枫红一季秋 -- NinGoo's blog关于HBase的一些零碎事2011年06月18日 by NinGoo 2 Comments随着Facebook使用HBase来构建实时消息系统，基于Hadoop的面向列存储的HBase持续升温。目前稳定版本的HBase0.90.2只能基于Hadoop0.20.x系列版本，暂不支持最新的0.21.x。而且官方版本... 阅读全文
posted @ 2012-03-11 09:41
lexus
阅读(191)
评论(0)
推荐(0)
摘要：
Copssh - OpenSSH for Windows | ITeF!xCopssh is an OpenSSH server and client implementation for Windows systems with an administration GUI. It is a yet another packaging of portable OpenSSH, Cygwin, so... 阅读全文
posted @ 2012-03-11 00:17
lexus
阅读(408)
评论(0)
推荐(0)
|
浙公网安备 33010602011771号