摘要:
如果在hive中运行的sql本身数据量很小,那么使用本地mr的效率要比分布式的快很多。。比如:Sql代码hive>select1fromdual;TotalMapReducejobs=1LaunchingJob1outof1Numberofreducetasksissetto0sincethere'snoreduceoperatorStartingJob=job_201208151631_2040444,TrackingURL=http://jt.dc.sh-wgq.sdo.com:50030/jobdetails.jsp?jobid=job_201208151631_20404 阅读全文
阅读排行榜
centos 6.3 修改默认的系统语言
2013-04-11 14:46 by java20130722, 292 阅读, 收藏,
摘要:
最近在安装cloudera cdh4 环境,于是安装了centos 6.3 64位的系统,在vCenter 中安装可以选择默认安装语言,在workstation9 中安装则无法选择安装语言,默认安装成了英文,结果就想改成中文,于是在网上开始了寻找方法:修改/etc/sysconfig/i18n中LANG="zh_CN.UTF-8" 为中文,LANG="en_US.UTF-8"为英文然后重启系统,但是发现我本地虚拟机上没有反应,执行 export 发现没有LANG 变量,才发现 GDM_LANG="en_US.UTF-8"于是找到/et 阅读全文
查找ruby方法(以rails为例)
2012-11-17 01:47 by java20130722, 292 阅读, 收藏,
摘要:
我们知道ruby使用动态方法,还有一些mixin等功能,所以查找ruby的方法变得比一般的语言更困难,高富帅可以用textmate,屌丝没得。主要的想法是使用grep。grep [options] [patten] [files]在使用linux命令查找ruby方法时,更多的时候需要使用-rn的参数就足够,r表示recursive, n表式行号可以先clone一份最新版本的rails代码作为实验:git@github.com:rails/rails.git首先进入到rails/activereocrd目录下,我们知道ActiveRecord类提供了如find_by这个方法,我们就查找find_ 阅读全文
'PIO_STACK_LOCATION' : illegal use of this type as an expression
2012-04-29 11:33 by java20130722, 292 阅读, 收藏,
摘要:
今天编程的时候碰到这个问题,在网上查阅资料后得知只需把.c的文件后缀名改为.cpp即可。 阅读全文
[置顶] 忆前年ThoughtWorks面试经历--用门开啤酒
2013-03-06 18:20 by java20130722, 291 阅读, 收藏,
摘要:
本来想不写这样的文章,觉得这种回忆过去的东西,都是一些有文化有层次的人写的。我这种小屁孩儿没做出个名堂,写了这种,以后要是还没出息,不久留下笑话的把柄了吗。后来看到微薄上别人写的回忆面试什么的,感觉写的可开心了,我也就想开心开心。要是以后没什么出息,就当我是个棒槌吧。 大四的时候,给导师做一个项目,是一个用来处理地震数据的分布式批处理系统。有一天,导师把我叫到了办公室,说周六的时候要很多人一起开个会。说是甲方不是很满意,导师说不是我的问题,我负责的部分进度一直还是比较快的。只是说这样的一个系统,用户是“看不见的”,因为我们按照功能划分了模块,不到最后一刻,谁也不知道这个东西运行起来会是什么样. 阅读全文
浙公网安备 33010602011771号