随笔分类 -  HADOOP

Hadoop集群的JobHistoryServer详解(转载）
摘要：Hadoop自带了一个历史服务器，可以通过历史服务器查看已经运行完的Mapreduce作业记录，比如用了多少个Map、用了多少个Reduce、作业提交时间、作业启动时间、作业完成时间等信息。默认情况下，Hadoop历史服务器是没有启动的，我们可以通过下面的命令来启动Hadoop历史服务器 这样我们就 阅读全文
posted @ 2017-10-26 18:52 ilvutm博园 阅读(9161) 评论(0) 推荐(0)
hive下UDF函数的使用
摘要：1、编写函数 [java] view plaincopyprint?package com.example.hive.udf; import org.apache.hadoop.hive.ql.exec.UDF; import org.apache.hadoop.io.Text; public fi 阅读全文
posted @ 2017-07-11 20:40 ilvutm博园 阅读(2773) 评论(0) 推荐(0)