2013年1月11日

pig中distinct用法

摘要： Distinct 只能处理关系中的整个记录，不能是表达式，或者部分域。 --distinct.pig daily = load 'NYSE_daily' as (exchange:chararray, symbol:chararray); uniq = distinct daily;... 阅读全文

posted @ 2013-01-11 20:13 代码王子 阅读(148) 评论(0) 推荐(0)

简单的hadoop配置（我安装的问题）

摘要： 一篇讲的非常详细的hadoop集群配置信息：http://blog.csdn.net/hguisu/article/details/7237395 从运维角度出发的hadoop配置，深入学习，有了很大提高http://www.cnblogs.com/xia520pi/archive/2012/... 阅读全文

posted @ 2013-01-11 16:27 代码王子 阅读(125) 评论(0) 推荐(0)

hadoop 统计一个目录的文件大小

摘要： du 使用方法：hadoop fs -du URI [URI …] 指定目录时，显示该目录中所有文件的大小， 而当只指定一个文件时，只显示此文件的大小。 示例： hadoop fs -du /user/hadoop/dir1 返回值： 成功返回0，失败返回-1。 dus 使用方法：hadoo... 阅读全文

posted @ 2013-01-11 15:59 代码王子 阅读(269) 评论(0) 推荐(0)

导航