随笔分类 -  大数据 & Hadoop

摘要:1.Map Reduce – the Free Lunch is not over? 原文地址:http://www.mengyan.org/blog/archives/2006/11/15/138.html 微软著名的C++大师Herb Sutter在2005年初的时候曾经写过一篇重量级的文章:”The Free Lunch Is Over: A Fundamental Turn Toward Concurrency in Software“,预言OO之后软件开发将要面临的又一次重大变革-并行计算。摩尔定律统制下的软件开发时代有一个非常有意思的现象:”Andy giveth, and Bil 阅读全文
posted @ 2012-06-05 11:06 Alex.XW.Wang 阅读(279) 评论(0) 推荐(0)
摘要:hadoop 1.0.0版本,安装完之后敲入hadoop命令时,老是提示这个警告:Warning: $HADOOP_HOME is deprecated.经查hadoop-1.0.0/bin/hadoop脚本和hadoop-config.sh脚本,发现脚本中对HADOOP_HOME的环境变量设置做了判断,笔者的环境根本不需要设置HADOOP_HOME环境变量。参考文章:HADOOP-7398解决方案一:到HOME目录编辑.bash_profile文件,去掉HADOOP_HOME的变量设定,重新输入hadoop fs命令,警告消失。解决方案二:到HOME目录编辑.bash_profile文件,添 阅读全文
posted @ 2012-06-04 20:41 Alex.XW.Wang 阅读(924) 评论(0) 推荐(0)