2015年3月29日
Hive操作之HQL语句
摘要： HQL操作1、Distribute by distribute by col按照col列把数据分散到不同的reduce sort sort by col 按照col列把数据排序 select col,co2 from table_name distribute by col1 sort by col... 阅读全文
posted @ 2015-03-29 22:46 天~宇~翱~翔 阅读(561) 评论(0) 推荐(0)
Hive学习之动态分区及HQL
摘要： Hive动态分区1、首先创建一个分区表create table t10(name string) partitioned by(dt string,value string)row format delimited fields terminatedby '\t' lines terminated ... 阅读全文
posted @ 2015-03-29 21:51 天~宇~翱~翔 阅读(3916) 评论(0) 推荐(0)
Hadoop经典面试题（转）
摘要： 单项选择题1. 下面哪个程序负责 HDFS 数据存储。a)NameNodeb)Jobtrackerc)Datanoded)secondaryNameNodee)tasktracker2. HDfS 中的 block 默认保存几份?a)3 份b)2 份c)1 份d)不确定3. 下列哪个程序通常与 Na... 阅读全文
posted @ 2015-03-29 16:00 天~宇~翱~翔 阅读(1228) 评论(0) 推荐(0)
Hive学习之更改表的属性
摘要： 1、修改表名 alter table table_name rename to new_table_name;2、修改列名 alter table tablename change column column_orign column_new int(修改后列的属性) comment 'column... 阅读全文
posted @ 2015-03-29 15:59 天~宇~翱~翔 阅读(12267) 评论(0) 推荐(0)
2015年3月28日
Hive入门之UDFS函数
摘要： 一．UDFS函数介绍1. 基本UDF（1）SHOWFUNCTIONS：这个用来熟悉未知函数。 DESCRIBE FUNCTION;（2）A IS NULL A IS NOT NULL（3）A LIKE B 普通sql匹配如 like “a%” A RLIKE B通过正则表达式匹配 A REGEXP ... 阅读全文
posted @ 2015-03-28 21:17 天~宇~翱~翔 阅读(894) 评论(0) 推荐(0)
Hive和Jdbc示例
摘要： 重要：在使用 JDBC 开发 Hive 程序时, 必须首先开启 Hive 的远程服务接口。使用下面命令进行开启:hive -service hiveserver &1). 测试数据userinfo.txt文件内容(每行数据之间用tab键隔开):1 xiapi2 xiaoxue3 qingqing... 阅读全文
posted @ 2015-03-28 13:04 天~宇~翱~翔 阅读(417) 评论(0) 推荐(0)
Hive常用操作之数据导入导出
摘要： 一、Hive数据导入导出1、hive数据导出 很多时候，我们在hive中执行select语句，希望将最终的结果保存到本地文件或者保存到hdfs系统中或者保存到一个新的表中，hive提供了方便的关键词，来实现上面所述的功能。 1.将select的结果放到一个新表中（首先要用create ta... 阅读全文
posted @ 2015-03-28 11:12 天~宇~翱~翔 阅读(1453) 评论(0) 推荐(0)
2015年3月26日
Hive 入门（转）
摘要： #创建表人信息表person(String name,int age)hive> create table person(name STRING,age INT)ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ESCAPED BY '\\' STORED... 阅读全文
posted @ 2015-03-26 23:03 天~宇~翱~翔 阅读(215) 评论(0) 推荐(0)
Hadoop 处理“Name node is in safe mode”问题（转）
摘要： 运行hadoop程序时，有时候会报以下错误：org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode 这个错误应该还满常见的吧（至少我运行的时候是这样的... 阅读全文
posted @ 2015-03-26 19:37 天~宇~翱~翔 阅读(467) 评论(0) 推荐(0)
Cglib学习站点（转）
摘要： 1、CGlib简单介绍，访问地址：http://www.blogjava.net/stone2083/archive/2008/03/16 /186615.html，从简单的示例到不同业务场景的变化，一步步让读者明白，为什么要使用cglib以及哪种场景下需要使用cglib；2、cglib源码学习交流... 阅读全文
posted @ 2015-03-26 16:51 天~宇~翱~翔 阅读(193) 评论(0) 推荐(0)