导航

2016年1月30日

hbase的regionserver宕机

摘要： 错误日志：regionserver.HRegionServer: Failed deleting my ephemeral nodezookeeper.RecoverableZooKeeper: ZooKeeper delete failed after 4... 阅读全文

posted @ 2016-01-30 13:50 ggzone 阅读(280) 评论(0) 推荐(0)

hbase的regionserver宕机

摘要： 错误日志：regionserver.HRegionServer: Failed deleting my ephemeral nodezookeeper.RecoverableZooKeeper: ZooKeeper delete failed after 4 attempts解决：a... 阅读全文

posted @ 2016-01-30 13:49 ggzone 阅读(351) 评论(0) 推荐(0)

根据硬件配置后mapred-site.xml和yarn-site.xml

摘要： 机器总共16G内存，sqoop导入数据时大约需要2G左右mapred-site.xml mapreduce.framework.name yarn mapreduce.jobhistory.address ... 阅读全文

posted @ 2016-01-30 13:45 ggzone 阅读(4766) 评论(0) 推荐(0)

根据硬件配置后mapred-site.xml和yarn-site.xml

摘要： 机器总共16G内存，sqoop导入数据时大约需要2G左右mapred-site.xml mapreduce.framework.name yarn mapreduce.jobhistory.a... 阅读全文

posted @ 2016-01-30 13:45 ggzone 阅读(155) 评论(0) 推荐(0)

阿里RDS备份恢复

摘要： 未使用root用户操作： 数据库版本要一致 数据目录：/data/mysqlbak/ 先按阿里给的步骤操作，最后出现一步出现，无法找到back_xxx.conf,但该文件已经存在。解决方法：sudo vim /etc/apparmor.d/usr.sbin.... 阅读全文

posted @ 2016-01-30 13:22 ggzone 阅读(120) 评论(0) 推荐(0)

阿里RDS备份恢复

摘要： 未使用root用户操作： 数据库版本要一致 数据目录：/data/mysqlbak/ 先按阿里给的步骤操作，最后出现一步出现，无法找到back_xxx.conf,但该文件已经存在。解决方法：sudo vim /etc/apparmor.d/usr.sbin.mysqld添加： /da... 阅读全文

posted @ 2016-01-30 13:21 ggzone 阅读(143) 评论(0) 推荐(0)

hive 调用java的函数和科学记数法转换

摘要： hive中field如果是string，比如id，那么使用10000000000+id结果是科学计数法显示，转换为正常显示方法：select (10000000000+cast(id as int)) as id from tb1 limit 10;hive 调用java的函数，必... 阅读全文

posted @ 2016-01-30 13:17 ggzone 阅读(840) 评论(0) 推荐(0)

hive 调用java的函数和科学记数法转换

摘要： hive中field如果是string，比如id，那么使用10000000000+id结果是科学计数法显示，转换为正常显示方法：select (10000000000+cast(id as int)) as id from tb1 limit 10;hiv... 阅读全文

posted @ 2016-01-30 13:17 ggzone 阅读(300) 评论(0) 推荐(0)

hive处理hbase数据

摘要： CREATE EXTERNAL TABLE table1(key string,zoneid int,result int,) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' W... 阅读全文

posted @ 2016-01-30 13:10 ggzone 阅读(159) 评论(0) 推荐(0)

hive处理hbase数据

摘要： CREATE EXTERNAL TABLE table1(key string,zoneid int,result int,) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROP... 阅读全文

posted @ 2016-01-30 13:09 ggzone 阅读(200) 评论(0) 推荐(0)

Sqoop导入mysql数据到Hbase

摘要： sqoop import --driver com.mysql.jdbc.Driver --connect "jdbc:mysql://11.143.18.29:3306/db_1" --username root --password root --qu... 阅读全文

posted @ 2016-01-30 13:04 ggzone 阅读(335) 评论(0) 推荐(0)

Sqoop导入mysql数据到Hbase

摘要： sqoop import --driver com.mysql.jdbc.Driver --connect "jdbc:mysql://11.143.18.29:3306/db_1" --username root --password root --query "select r... 阅读全文

posted @ 2016-01-30 13:03 ggzone 阅读(1111) 评论(2) 推荐(0)

Hbase基础操作

摘要： $HBASE_HOME/bin/hbase org.apache.hadoop.hbase.mapreduce.RowCounter 'tablename' 阅读全文

posted @ 2016-01-30 12:58 ggzone 阅读(111) 评论(0) 推荐(0)

Hbase基础操作

摘要： $HBASE_HOME/bin/hbase org.apache.hadoop.hbase.mapreduce.RowCounter 'tablename' 阅读全文

posted @ 2016-01-30 12:57 ggzone 阅读(164) 评论(0) 推荐(0)