07 2017 档案

Linux 学习笔记
摘要：. 当前目录 / 根目录 ~ $HOME目录 反斜杠 \告诉s h e l l该命令尚未结束 touch:创建新文件 chmod u+l filename:l权限，给文件filename加锁,别的用户不能访问此文件 绝对模式：4:读 2：写 1：执行。例如：744 <==> -rwxr--r-- 一 阅读全文
posted @ 2017-07-20 20:28 ilvutm博园 阅读(378) 评论(0) 推荐(0)
MySQL时间差返回月个数
摘要：Sql代码 select PERIOD_DIFF(date_format(now(),'%Y%m'),date_format('2010-11-30','%Y%m')) Sql代码 Sql代码 1. MySQL 为日期增加一个时间间隔：date_add() Sql代码 set @dt = now() 阅读全文
posted @ 2017-07-12 10:45 ilvutm博园 阅读(4279) 评论(0) 推荐(0)
Hive总结（七）Hive四种数据导入方式
摘要： 阅读全文
posted @ 2017-07-11 20:42 ilvutm博园 阅读(345) 评论(0) 推荐(0)
hive下UDF函数的使用
摘要：1、编写函数 [java] view plaincopyprint?package com.example.hive.udf; import org.apache.hadoop.hive.ql.exec.UDF; import org.apache.hadoop.io.Text; public fi 阅读全文
posted @ 2017-07-11 20:40 ilvutm博园 阅读(2775) 评论(0) 推荐(0)
hive分区（partition）
摘要：网上有篇关于hive的partition的使用讲解的比较好，转载了：一、背景1、在Hive Select查询中一般会扫描整个表内容，会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据，因此建表时引入了partition概念。2、分区表指的是在创建表时指定的partition的分区空间 阅读全文
posted @ 2017-07-11 20:35 ilvutm博园 阅读(19387) 评论(0) 推荐(1)
hive导出查询文件到本地文件的2种办法
摘要：通过HQL语句 可以将hive 中表的数据生成到指定的目录。 有时候 我们可以利用hive来生成统计的中间文件（比源文件小的多的） 方法有如下2种： 1.INSERT OVERWRITE LOCAL DIRECTORY 将结果输出到指定的目录： 生成的文件数 和redurcer的数目的一样的 在hi 阅读全文
posted @ 2017-07-11 20:34 ilvutm博园 阅读(4715) 评论(1) 推荐(0)
mysql 两个时间段的差,可以是秒,天,星期,月份,年...
摘要：SELECT TIMESTAMPDIFF(SECOND, now(), "2012-11-11 00:00:00") 语法为：TIMESTAMPDIFF(unit,datetime1,datetime2)， 其中unit单位有如下几种，分别是：FRAC_SECOND (microseconds), 阅读全文
posted @ 2017-07-11 20:30 ilvutm博园 阅读(1514) 评论(2) 推荐(0)