摘要： 首先group by 的简单说明: group by 一般和聚合函数一起使用才有意义,比如 count sum avg等,使用group by的两个要素: (1) 出现在select后面的字段 要么是是聚合函数中的,要么就是group by 中的. (2) 要筛选结果 可以先使用where 再用gr 阅读全文

摘要： （注：虽然连接成功但是还是执行不了。以后有时间再解决吧 看到的人别参考仅作个人笔记）先mark下 1、首先在window下载好一个eclipse。和拷贝好linux里面hadoop版本对应的插件（我是用hadoop-eclipse-plugin-2.3.0.jar） 2、拷贝hadoop-eclip 阅读全文

摘要： 1、mapreduce开发应当在linux里面的eclipse不然容易出现问题。 2、把eclipse拷贝到linux环境中，然后需要拷贝hadoop-eclipse-plugin-2.3.0.jar到tar -zxvf解压目录下的plugins 3、拷贝http://archive.clouder 阅读全文

摘要： Unable to create the selected preference page.org/apache/hadoop/eclipse/preferences/MapReducePreferencePage : Unsupported major.minor version 51.0 PAT 阅读全文

摘要： 由于hive执行过程中参数必须写死，无法进行传递参数。利用shell脚本和java编程进行解决 #!/bin/sh#date = `date -d -1days '+%Y-%m-%d'`if [ $# = "1" ]; then date=$1else date=`date -d -1days '+ 阅读全文

摘要： 1 可以先测试mysql本地连接石否正常 2 正常的话查看远程连接的IP在mysql中是否有权限 GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123123' WITH GRANT OPTION; note：（记得修改IP抵制和密码 阅读全文

摘要： Mysql错误:Ignoring query to other database解决方法 今天登陆mysql show databases出现Ignoring query to other database错误，又试了几个命令和sql全部提示Ignoring query to other datab 阅读全文

摘要： 设想： Hbase不支持join，不能做复杂统计类； Hive可以。 Hive-hbase接口表岂不两全其美？ 用户画像表有300个字段，每天都使用： 1、在业务系统里实时根据uid调取用户的画像信息；需要查询hbase；主要应用场景，实时查询。 2、Join、count、sum类查询分析，从hiv 阅读全文

摘要： 1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询--因为它只能 阅读全文

摘要： 一、mysql迁移数据进hbase需要配置好配置文件 用sqoop 命令进行迁移 二、 配置文件内容： import--connectjdbc:mysql://172.18.32.99:3306/test--usernameroot--password123456-m1--null-string'' 阅读全文