牵牛花

摘要： 0. date -R 中国上海的时区是+8000 1.tzselect 设置时区,依次选择5,9,1,1(如果时区不一样,执行下面的命令得到之后时间是不一样的) 2.sudo ntpdate asia.pool.ntp.org;date 与服务器同步时间 3. date -s "2012-08-27 阅读全文

摘要： 补充: sqoop安装之后的配置,配置很简单,加上上面的数据就可以用了 修改配置文件$ cd /conf$ cp sqoop-env-template.sh sqoop-env.sh打开sqoop-env.sh并编辑下面几行：export HADOOP_COMMON_HOME=/home/hadoo 阅读全文

摘要： mysql -uroot study -proot << EOF > insert into top_n_movie(movie,sumprice)values('hello kitty',100);> EOF 一定要换行 shell 实现mysql写入操作 shell语句查询mysql数据库的常用 阅读全文

摘要： mr的三种运行方式 第一种,打成jar包,在hadoop上运行 第二种,driver端在本地,通过ide连接linux上的hdfs 第三种,windows本地运行 第三种,windows本地运行 hadoop_dll2.6.0_64bit下载地址 https://pan.baidu.com/s/1k 阅读全文

摘要： HashMap与TreeMap按照key和value排序 使用一个场景是mapreduce中用解决topn问题是用value 排序 topn MapReducetopN 阅读全文

摘要： http://blog.csdn.net/daxiang12092205/article/details/52717470 阅读全文

摘要： package study.bigdata; import org.apache.commons.io.FileUtils; import org.apache.commons.io.IOUtils; import org.apache.commons.lang3.RandomStringUtils; import org.junit.Test; import java.io.Buffere... 阅读全文

摘要： #log4j.rootLogger=INFO,C log4j.rootLogger=INFO,C #first way log All ########## # C,System.out #log4j.appender.C.Threshold=INFO print info or above ########## # log4j.logger.sfk.bbs=INFO,C,F # only lo... 阅读全文

摘要： 新建一个maven项目 iead,新建是不选择archetype,新建好之后,pom中的 <packaging>pom</packaging>节点是默认的,如果不是要改成这这样子 然后选中这个项目,新建一个module,之后就和建立普通项目一样了. eclipse 是这样的 建一个普通的maven项 阅读全文

摘要： 对象复制的一个使用场景,在使用redis和Hbase处理两个库的事务时,要手动实现事务,在修改一些数据时要先复制一份,在hbase或者dedis做updata操作失败时还原用. 在hbase中没有事务,需要自己实现事务,此时也用到了对象的深复制 第二种方法,通过序列化和反序列话实现,此时被序列化的类 阅读全文