摘要: 1.在crontab的执行环境变量中,没有相应用户设置的环境变量,你需要手动设置一下环境变量,才能让它生效。2.运行crontab,必须使用绝对路径(包括所执行的脚本中也必须是绝对路径)。 阅读全文
posted @ 2013-07-17 09:41 三米 阅读(175) 评论(0) 推荐(0) 编辑
摘要: Sqoop介绍 Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如:MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。(本文档中使用的是sqoop-1.4.2-cdh4.2.1版本)为什么要使用sqoop 因为业务的不断增长导致mysql数据库中数据太多,影响数据查询效率,所以使用sqoop把现有mysql中数据导入到HBase中,使用HBase支撑大数据量的查询。Sqoop的安装下载wget http://archive.cloudera.com/cdh4/c 阅读全文
posted @ 2013-06-14 10:51 三米 阅读(4789) 评论(1) 推荐(0) 编辑
摘要: 首先介绍下安装的版本,以前安装好了hadoop-1.0.4,后发现hbase-0.94.4和hadoop-1.04符合并且和zookeeper-3.4-5符合,所以选择了安装Hbase-0.94.41. 下载安装包从 Hbase 官网下载页面下载安装包, 然后:1 tar xfz hbase-0.94.4.tar.gz 2 cd hbase-0.94.4 3 chmod ugo+x ./bin/*.sh 2. 配置 hbase-env.sh 和 hbase-default.xml两个配置文件中的一个 hbase-env.sh 已经存在于 conf/ 目录下, 但 hbase-default.. 阅读全文
posted @ 2013-01-25 10:37 三米 阅读(761) 评论(0) 推荐(0) 编辑
摘要: 一、安装下载jdk-6u38-linux-i586.bin以下过程在root用户下操作创建java文件目录:#mkdir /usr/java复制文件到该目录#cp ~/jdk-6u38-linux-i586.bin /usr/java更改该文件的权限#chmod 755jdk-6u38-linux-i586.binjdk-6u38-linux-i586.bin这个是自解压的文件,直接运行即可#./jdk-6u38-linux-i586.bin (ps:这个步骤一定要在jdk-6u11-linux-i586.bin所在目录下 路径问题你懂的~)二、配置装好vim了吗,其实vi也行 看你习惯了 . 阅读全文
posted @ 2013-01-12 15:04 三米 阅读(370) 评论(0) 推荐(0) 编辑
摘要: Ubuntu 新装上去的时候是只有root帐号但是没有root密码,在安装过程中也没有让设置root密码,可能是基于安全的考虑吧,所以需要root权限的时候一般在命令前加上sudo获取root权限。但是有些时候很不方便,所以想获取root用户密码,只能用更改密码来获取:sudo passwd root 输入你安装时候用户的密码,设置root密码。ok,get it! 阅读全文
posted @ 2013-01-12 14:34 三米 阅读(294) 评论(0) 推荐(0) 编辑
摘要: 一、原理 MSM(memcached-session-manager)支持tomcat6和tomcat7,利用Value(Tomcat阀)对Request进行跟踪。Request请求到来时,从memcached加载session,Request请求结束时,将tomcat session更新至memcached,以达到session共享之目的,支持sticky 和non-sticky模式。Sticky模式:tomcat session为主session,memcached为备session。Request请求到来时,从memcached加载备session到tomcat (仅当tomcat jv 阅读全文
posted @ 2012-12-19 16:16 三米 阅读(513) 评论(0) 推荐(0) 编辑
摘要: 我遇到的问题,安装好cygwin后并配置服务,启动服务时遇到如下错误windows服务管理界面启动弹出窗口: 服务启动后停止了,没有工作什么之类,类似性能日志。 cygwin客户端:$ cygrunsrv --start sshd: cygrunsrv: Error starting a service: QueryServiceStatus: Win32 error 1062: The service has not been started. 后来查看了日志 /var/log/sshd.log 日志报错翻译:权限拒绝,无sshd这个用户。所有我又配置了一次sshd... 阅读全文
posted @ 2012-11-16 09:35 三米 阅读(3906) 评论(1) 推荐(0) 编辑