标签集

07 2011 档案

hadoop的优势(不断更新中)
摘要：1. 速度快. Hbase从2T数据中查找1条记录用2秒,这是ORACLE达不到的. http://wenku.baidu.com/view/6f61a42eb4daa58da0114a41.html 阅读全文

posted @ 2011-07-05 09:02 宋亚奇 阅读(422) 评论(0) 推荐(0)

安装hadoop感悟
摘要：初次使用hadoop，摆在面前两种方案：1。选3台主机建立系统；2。选择虚拟机系统；由于刚得到一台高配的pc，有4g内存，所以选2 。安装配置目前已完成，中间遇到不少问题，感觉使用虚拟机还是省了很多时间，更加方便。结论：学习阶段使用虚拟机；工程阶段使用多机。 阅读全文

posted @ 2011-07-04 09:17 宋亚奇 阅读(799) 评论(1) 推荐(0)

安装HBase感悟
摘要：1 分别测试：先测试hadoop是否安装配置成功，然后再测试hbase。2 版本问题很严重。这需要首先阅读hbase-0.90.3/doc下的文档。在Start Guid中明确说明了hadoop hbase zookeeper搭配各自的版本，这样就可以少走弯路了。3 学会看日志了。在执行bin/start-all后只是提示操作的结果写入了相关日志，并不代表执行成功。可以首先使用jps察看进程列表，或者用浏览器察看相关监控页面，如果不正常，比如有的进程没有正常启动，再看日志。日志文件有两种.out 和.log，往往.out总是空的，我都看log，比如，发现HMaster进程没有启动，则看Hado 阅读全文

posted @ 2011-07-01 11:42 宋亚奇 阅读(619) 评论(0) 推荐(0)

HBASE安装过程-all
摘要：环境hbase-0.90.3hadoop-0.20.2一开始我用的是hadoop-0.21.0，搞了半天搞不好，日志里面报错说连接的时候出错2011-06-15 16:05:32,239 FATAL org.apache.hadoop.hbase.master.HMaster: Unhandled exception. Starting shutdown.java.io.IOException: Call to hadoop5/10.20.151.9:9000 failed on local exception: java.io.EOFException看了半天配置看不出有什么问题，后来和同事 阅读全文

posted @ 2011-07-01 11:21 宋亚奇 阅读(2580) 评论(0) 推荐(0)

导航