摘要：
一、Hive简介 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 Hvie是建立在Hadoop上的数据仓库基础架构。它提供了一系列的工具，可以用来进行数据提取转化加载(ETL)，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语句，称为HQL，它允许熟悉SQL的用户查询数据。同时 阅读全文
摘要：
Linux是一个很能自动产生文件的系统，日志、邮件、备份等。因此需要设置让系统定时清理一些不需要的文件。语句写法： find 对应目录 -mtime +天数 -name "文件名" -exec rm -rf {} \;例子： find /app/label/log -mtime +10 -name "*.*" -exec rm -f {} \;将/app/label/log目录下所有10天前带"."的文件删除。find：linux的查找命令，用户查找指定条件的文件；/app/label/log：想要进行清理的任意目录；-mtime：标 阅读全文
摘要：
1、eval命令将会首先扫描命令行进行所有的替换，再执行命令。该命令使用于那些一次扫描无法实现其功能的变量。该命令对变量进行两次扫描。这些需要进行两次扫描的变量有时候被称为复杂变量。 2、eval也可以用于回显简单变量，不一定时复杂变量。[root@node2 mysql]# NAME=ZONE[root@node2 mysql]# eval echo $NAMEZONE----等价于[root@node2 mysql]# echo $NAMEZONE 3、两次扫描[root@node2 app]# cat test.txt hello shell world![root@node2 app. 阅读全文
摘要：
一、Haproxy概念Haproxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。Haproxy特别适用于那些负载特大的web站点，这些站点通常又需要会保持或七层处理。Haproxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中，同时可以保护你的web服务器不被暴露到网络上。二、安装Haproxy[root@node3 app]# tar zxvf haproxy-1.4.24.tar.gz[root@node3 app]# mv haproxy-1.4.24 hap 阅读全文
摘要：
1、查看check_disk脚本[oracle@rhel5 ~]$ /usr/local/nagios/libexec/check_disk --hcheck_disk v1.4.15 (nagios-plugins 1.4.15)Copyright (c) 1999 Ethan Galstad Copyright (c) 1999-2008 Nagios Plugin Development Team This plugin checks the amount of used disk space on a mounted file systemand generates an al... 阅读全文
摘要：
一、本文说明： 本文是监控本地的Oracle，其实监控远端的Oracle也是跟下面的步骤差不多的。二、安装Nagios、Nagios插件、NRPE软件： 安装步骤可以参考《Linux下Nagios的安装与配置》 注意点： 1、由于nagios脚本需要读取oracle相关文件。所在运行nagios的用户需要定义为Oracle服务用户。并且修改/etc/xinted.d/nrpe中配置。[oracle@rhel5 libexec]$ cat /etc/xinetd.d/nrpe # default: on# description: NRPE (Nagios Remote Plugin Execu 阅读全文
摘要：
使用root用户启动hadoop的时候报错：[root@node1 ~]# su - hadoop -c start-all.shstarting namenode, logging to /app/hadoop/bin/../logs/hadoop-hadoop-namenode-node1.out192.168.1.153: starting datanode, logging to /app/hadoop/bin/../logs/hadoop-hadoop-datanode-node3.out192.168.1.152: starting datanode, logging to /ap 阅读全文
摘要：
工作原理： 利用特定的用户定期访问指定的mysql数据库。当不能访问或连不通时则报警。1.在生产库上安装nagios插件 安装略 备注：编译完显示一定要有mysql支持，不然没有check_mysql插件2.配置mysql----建立nagdb专用数据库mysql> create database nagdb default CHARSET=utf8;Query OK, 1 row affected (0.01 sec)mysql> grant select on nagdb.* to 'nagios'@'%';Query OK, 0 rows af 阅读全文
摘要：
一、本文说明 本文是在参考：http://www.cnblogs.com/mchina/archive/2013/02/20/2883404.html David_Tang文章以及网上的一些资料完成，其中绝大部分内容是转载于David_Tang。二、Nagios简介 Nagios是一款开源的电脑系统和网络监视工具，能有效监控Windows、Linux和Unix的主机状态，交换机路由器等网络设置，打印机等。在系统或服务状态异常时发出邮件或短信报警第一时间通知运维人员，在状态恢复后发出正常的邮件或短信通知。 Nagios原名为NetSaint，由Ethan Galstad开发并维护至今。NAGIO 阅读全文
摘要：
一、备份数据库----清空一下日志mysql> reset master;Query OK, 0 rows affected (0.02 sec)----查看一下echo表的存储引擎mysql> show table status like 'echo' \G;*************************** 1. row *************************** Name: echo Engine: InnoDB Version: 10 Row_format: Compact Rows: 3 A... 阅读全文