摘要: 1.Streaming简介Streaming工具允许用户使用非java的语言来编写map和reduce函数。Hadoop的Streaming使用Unix标准作为Hadoop和应用程序之间的接口,所以我们可以使用任何编程语言通过标准输入/输出来写MapReduce程序。详细的用法可以参考这篇博文: http://dongxicheng.org/mapreduce/hadoop-streaming-programming/。 接下举一个Python脚本编写的WordCount的例子:2.脚本程序Mapper:Reducer:注意脚本程序需要有足够的权限,使用命令:chmod a+x Mapper. 阅读全文
posted @ 2012-10-17 20:06 gerifeng 阅读(2624) 评论(7) 推荐(0)