2019年1月25日
hive 中简单的udf函数编写
摘要： 1.注册函数，使用using jar方式在hdfs上引用udf库。 $hive>create function formattime as 'com.bigdata.udf.FormatTimeUDF' using jar 'hdfs://hadoop01/app/app-logs-hive-1.0-SNAPSHOT.jar';2.注销函数，只需要删除mysql的hive数据记录即可。 de... 阅读全文
posted @ 2019-01-25 18:03 夜半钟声到客船 阅读(1274) 评论(0) 推荐(0)
hive 用户行为分析（活跃。启动，留存，回访，新增）的一些经典sql
摘要： 很简单的sql 用户分析语句 ：只要自定义简单的udf函数 获取统计时间createdatms字段的 使用的日历类 add方法 和simpledateformat 将long类型的 定义多个重载方法 获取返回值int类型 或者long类型 进行时间判断即可 getdaybegin（天开始），比如20 阅读全文
posted @ 2019-01-25 17:57 夜半钟声到客船 阅读(5441) 评论(0) 推荐(0)
浏览收藏夹 看到了hadoop3.0 的改动
摘要： 大数据非常前卫的it网站 https://www.iteblog.com/archives/tag/hadoop/ 1.多个服务的默认端口被改变 在此之前，多个Hadoop服务的默认端口都属于Linux的临时端口范围（32768-61000）。这就意味着我们的服务在启动的时候可能因为和其他应用程序产 阅读全文
posted @ 2019-01-25 17:47 夜半钟声到客船 阅读(213) 评论(0) 推荐(0)