导航

11 2015 档案

摘要:文章出自:http://my.oschina.net/leoleong/blog/477508 本文主要从基础准备,添加DataNode和添加NodeManager三个部分详细说明在Hadoop2.6.0环境下,如何动态新增节点到集群中。•基础准备在基础准备... 阅读全文

posted @ 2015-11-28 19:47 ggzone 阅读(113) 评论(0) 推荐(0)

摘要:文章出自:http://my.oschina.net/leoleong/blog/477508 本文主要从基础准备,添加DataNode和添加NodeManager三个部分详细说明在Hadoop2.6.0环境下,如何动态新增节点到集群中。•基础准备在基础准备部分,主要是设置hadoo... 阅读全文

posted @ 2015-11-28 19:46 ggzone 阅读(896) 评论(0) 推荐(0)

摘要:添加环境变量#ZooKeeper VARIABLES STARTexport ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.6export PATH=$PATH:$ZOOKEEPER_HOME/bin#ZooKeeper VARIABLES END修... 阅读全文

posted @ 2015-11-28 19:44 ggzone 阅读(176) 评论(0) 推荐(0)

摘要:添加环境变量#ZooKeeper VARIABLES STARTexport ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.6export PATH=$PATH:$ZOOKEEPER_HOME/bin#ZooKeeper V... 阅读全文

posted @ 2015-11-28 19:44 ggzone 阅读(285) 评论(0) 推荐(0)

摘要:新安装的ubuntu14.04无法使用root用户ssh连接,显示ssh root permission denied 解决方法: /etc/ssh/sshd_confg: PermitRootLogin without-password改为 PermitR... 阅读全文

posted @ 2015-11-28 19:26 ggzone 阅读(120) 评论(0) 推荐(0)

摘要:新安装的ubuntu14.04无法使用root用户ssh连接,显示ssh root permission denied 解决方法: /etc/ssh/sshd_confg: PermitRootLogin without-password改为 PermitRootLogin yess... 阅读全文

posted @ 2015-11-28 19:25 ggzone 阅读(125) 评论(0) 推荐(0)

摘要:查看版本: ansible –version 升级pip安装的ansible: sudo pip install -U ansible 阅读全文

posted @ 2015-11-28 19:19 ggzone 阅读(112) 评论(0) 推荐(0)

摘要:查看版本: ansible –version 升级pip安装的ansible: sudo pip install -U ansible 阅读全文

posted @ 2015-11-28 19:19 ggzone 阅读(118) 评论(0) 推荐(0)

摘要:SSH密钥上传到被控制机 ansible-doc authorized_key将压缩文件解压到目标机器 ansible-doc unarchive修改配置文件 lineinfile blockinfile 阅读全文

posted @ 2015-11-28 19:18 ggzone 阅读(180) 评论(0) 推荐(0)

摘要:SSH密钥上传到被控制机 ansible-doc authorized_key将压缩文件解压到目标机器 ansible-doc unarchive修改配置文件 lineinfile blockinfile 阅读全文

posted @ 2015-11-28 19:18 ggzone 阅读(108) 评论(0) 推荐(0)

摘要:添加alias ~/.bash_alias文件: alias go=”python /Users/xhat/Downloads/goagent/local/proxy.py” ~/.bash_profile文件: source ~/.bash_alias 命令行:source ~/.... 阅读全文

posted @ 2015-11-28 19:13 ggzone 阅读(112) 评论(0) 推荐(0)

摘要:添加alias ~/.bash_alias文件: alias go=”python /Users/xhat/Downloads/goagent/local/proxy.py” ~/.bash_profile文件: source ~/.bash_alias 命... 阅读全文

posted @ 2015-11-28 19:13 ggzone 阅读(109) 评论(0) 推荐(0)

摘要:导入所有表:sqoop import-all-tables –connect jdbc:mysql://ip:port/dbName --username userName --password passWord -m 1 --hive-import;导... 阅读全文

posted @ 2015-11-22 18:20 ggzone 阅读(528) 评论(0) 推荐(0)

摘要:导入所有表:sqoop import-all-tables –connect jdbc:mysql://ip:port/dbName --username userName --password passWord -m 1 --hive-import;导入一个表:sqoop im... 阅读全文

posted @ 2015-11-22 18:19 ggzone 阅读(1611) 评论(0) 推荐(0)

摘要:错误1:WARN hdfs.DFSClient: DataStreamer Exceptionorg.apache.hadoop.ipc.RemoteException(java.io.IOException): File /user/ha1/input/h... 阅读全文

posted @ 2015-11-22 18:04 ggzone 阅读(136) 评论(0) 推荐(0)

摘要:错误1:WARN hdfs.DFSClient: DataStreamer Exceptionorg.apache.hadoop.ipc.RemoteException(java.io.IOException): File /user/ha1/input/hadoop/yarn-en... 阅读全文

posted @ 2015-11-22 18:03 ggzone 阅读(727) 评论(0) 推荐(0)

摘要:sqoop导数据卡住在INFO mapreduce.Job: Running job: job_1447835049223_0010 查yarn日志全是:INFO org.apache.hadoop.yarn.server.resourcemanager.scheduler.capa... 阅读全文

posted @ 2015-11-22 17:54 ggzone 阅读(434) 评论(0) 推荐(0)

摘要:sqoop导数据卡住在INFO mapreduce.Job: Running job: job_1447835049223_0010 查yarn日志全是:INFO org.apache.hadoop.yarn.server.resourcemanager.s... 阅读全文

posted @ 2015-11-22 17:54 ggzone 阅读(120) 评论(0) 推荐(0)

摘要:下载eclipse-jee-mars-1-macosx-cocoa-x86_64.tar 右键显示包内容,将hadoop-eclipse-plugin-2.6.0.jar拷入到刚显示的包的plugin文件夹中打开eclipse,点击菜单Eclipse–偏好设置–Hadoop Map ... 阅读全文

posted @ 2015-11-22 17:07 ggzone 阅读(383) 评论(0) 推荐(0)

摘要:下载eclipse-jee-mars-1-macosx-cocoa-x86_64.tar 右键显示包内容,将hadoop-eclipse-plugin-2.6.0.jar拷入到刚显示的包的plugin文件夹中打开eclipse,点击菜单Eclipse–偏好设... 阅读全文

posted @ 2015-11-22 17:07 ggzone 阅读(131) 评论(0) 推荐(0)

摘要:环境:Hadoop 2.3.0 sqoop 1.4.51、下载并解压sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz (解压完,名字会很长,可以根据需要自己修改下目录名)tar -zxvfsqoop-1.4.5.bin__had... 阅读全文

posted @ 2015-11-22 17:06 ggzone 阅读(323) 评论(0) 推荐(0)

摘要:环境:Hadoop 2.3.0 sqoop 1.4.51、下载并解压sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz (解压完,名字会很长,可以根据需要自己修改下目录名)tar -zxvfsqoop-1... 阅读全文

posted @ 2015-11-22 17:06 ggzone 阅读(122) 评论(0) 推荐(0)

摘要:下载:apache-hive-1.2.1-src.tar apache-hive-1.2.1-src.tar 解压,cd apache-hive-1.2.1-src/hwi 命令:jar cfM hive-hwi-1.2.0.war -C web . 复制:... 阅读全文

posted @ 2015-11-22 17:05 ggzone 阅读(130) 评论(0) 推荐(0)

摘要:下载:apache-hive-1.2.1-src.tar apache-hive-1.2.1-src.tar 解压,cd apache-hive-1.2.1-src/hwi 命令:jar cfM hive-hwi-1.2.0.war -C web . 复制:hive-1.2.1/li... 阅读全文

posted @ 2015-11-22 17:04 ggzone 阅读(345) 评论(0) 推荐(0)

摘要:1、添加环境变量:vi ~/.bashrc#HIVE VARIABLES STARTexport HIVE_HOME=/usr/local/hive-1.2.1export PATH=$PATH:$HIVE_HOME/binexport CLASSPATH=$CLASSPATH:$H... 阅读全文

posted @ 2015-11-22 17:01 ggzone 阅读(346) 评论(0) 推荐(0)

摘要:1、添加环境变量:vi ~/.bashrc#HIVE VARIABLES STARTexport HIVE_HOME=/usr/local/hive-1.2.1export PATH=$PATH:$HIVE_HOME/binexport PATH=$PATH... 阅读全文

posted @ 2015-11-22 17:01 ggzone 阅读(231) 评论(0) 推荐(0)

摘要:ubuntu更换软件源/etc/apt/source.list163:deb http://mirrors.163.com/ubuntu/ trusty main restricted universe multiversedeb http://mirrors.1... 阅读全文

posted @ 2015-11-13 21:02 ggzone 阅读(152) 评论(0) 推荐(0)

摘要:ubuntu更换软件源/etc/apt/source.list163:deb http://mirrors.163.com/ubuntu/ trusty main restricted universe multiversedeb http://mirrors.163.com/ubuntu/ t... 阅读全文

posted @ 2015-11-13 21:01 ggzone 阅读(179) 评论(0) 推荐(0)

摘要:ubuntu英文乱码:vi /etc/default/localeLANG=“en_US.UTF-8”LANGUAGE=“en_US:en”配置更新:dpkg-reconfigure localesreboot 阅读全文

posted @ 2015-11-13 20:55 ggzone 阅读(180) 评论(0) 推荐(0)

摘要:ubuntu英文乱码:vi /etc/default/localeLANG=“en_US.UTF-8”LANGUAGE=“en_US:en”配置更新:dpkg-reconfigure localesreboot 阅读全文

posted @ 2015-11-13 20:54 ggzone 阅读(431) 评论(0) 推荐(0)

摘要:详细配置:http://blog.csdn.net/ggz631047367/article/details/424263911.修改机器/etc/hostname分别为 master slave1 slave2 重启2.修改/etc/hosts,删除多余项 192.168.2.223 master... 阅读全文

posted @ 2015-11-13 20:53 ggzone 阅读(489) 评论(0) 推荐(0)

摘要:详细配置:http://blog.csdn.net/ggz631047367/article/details/424263911.修改机器/etc/hostname分别为 master slave1 slave2 重启2.修改/etc/hosts,删除多余项... 阅读全文

posted @ 2015-11-13 20:53 ggzone 阅读(133) 评论(0) 推荐(0)

摘要:http://www.linuxidc.com/Linux/2013-05/83780.htm 阅读全文

posted @ 2015-11-08 21:14 ggzone 阅读(198) 评论(0) 推荐(0)

摘要:http://www.linuxidc.com/Linux/2013-05/83780.htm 阅读全文

posted @ 2015-11-08 21:13 ggzone 阅读(206) 评论(0) 推荐(0)

摘要:[ ] zabbix-短信报警(参考http://hanyun.blog.51cto.com/1060170/1604918 )[ ] zabbix-电话报警(参考http://dl528888.blog.51cto.com/2382721/1639579 ) htt... 阅读全文

posted @ 2015-11-08 21:13 ggzone 阅读(131) 评论(0) 推荐(0)

摘要:[ ] zabbix-短信报警(参考http://hanyun.blog.51cto.com/1060170/1604918 )[ ] zabbix-电话报警(参考http://dl528888.blog.51cto.com/2382721/1639579 )https://luosimao.com... 阅读全文

posted @ 2015-11-08 21:12 ggzone 阅读(316) 评论(0) 推荐(0)

摘要:http://blog.csdn.net/xin_yu_xin/article/details/45115723 阅读全文

posted @ 2015-11-08 21:10 ggzone 阅读(458) 评论(0) 推荐(0)

摘要:http://blog.csdn.net/xin_yu_xin/article/details/45115723 阅读全文

posted @ 2015-11-08 21:10 ggzone 阅读(165) 评论(0) 推荐(0)

摘要:监测tcp连接数文件名:/etc/zabbix/zabbix_agentd.conf.d/count_tcp.confUserParameter=count.tcp,netstat -s|grep "connections established"|awk '{print$1}'客户端检验自定义... 阅读全文

posted @ 2015-11-08 21:05 ggzone 阅读(481) 评论(0) 推荐(0)

摘要:监测tcp连接数文件名:/etc/zabbix/zabbix_agentd.conf.d/count_tcp.confUserParameter=count.tcp,netstat -s|grep "connections established"|awk '{p... 阅读全文

posted @ 2015-11-08 21:05 ggzone 阅读(133) 评论(0) 推荐(0)