摘要： 本节内容： Ansible条件测试 一、Ansible条件测试 在ansible中还可以进行条件测试。如果需要根据变量、facts或此前任务的执行结果来做为某task执行与否的前提时要用到条件测试。 1. when语句 在task后添加when子句即可使用条件测试：when语句支持Jinja2表达式 阅读全文

摘要： 本节内容： ansible playbook介绍 ansible playbook基础组件 playbook中使用变量 一、ansible playbook介绍 playbook是由一个或多个“play”组成的列表(剧本是由多出戏组成的)。play的主要功能在于将事先归并为一组的主机装扮成事先通过a 阅读全文

摘要： 本节内容： YAML Ansible常用的数据类型 Ansible基础元素 一、YAML 1. YAML介绍 YAML是一个可读性高的用来表达资料序列的格式。YAML参考了其他多种语言，包括：XML、C语言、Python、Perl以及电子邮件格式RFC2822等。Clark Evans在2001年在 阅读全文

摘要： 本节内容： ansible命令基础 常见模块举例 一、ansible命令基础 语法： host-pattern：这次的命令对哪些主机生效； -f forks：启动的并发线程数，就是一次并行处理多少主机； -m module_name：要使用的模块； -a args：模块特有的参数。 常见的模块： u 阅读全文

摘要： 本节内容： 运维工具 Ansible特性 Ansible架构图和核心组件 安装Ansible 演示使用示例 一、运维工具 作为一个Linux运维人员，需要了解大量的运维工具，并熟知这些工具的差异，能够熟练运用这些工具去解决一些手动重复的劳动，一方面是避免人工操作失误，另一方面也可以提高工作效率。同时 阅读全文

摘要： 一、Spark介绍 1.1 Apache Spark Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架(没有数据存储)。最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一。 1.2 Hadoop和Spark Hadoop常 阅读全文

摘要： 本节内容： 环境规划 配置集群各节点hosts文件 安装JDK1.7 安装依赖包ssh和rsync 各节点时间同步 安装Zookeeper集群 添加Hadoop运行用户 配置主节点登录自己和其他节点不需要输入密码 安装hadoop 启动hadoop 停止hadoop 一、环境规划 由于机器资源紧张， 阅读全文

摘要： 本节内容： Hadoop版本 安装部署Hadoop 一、Hadoop版本 1. Hadoop版本种类 目前Hadoop发行版非常多，有华为发行版、Intel发行版、Cloudera发行版（CDH）等，所有这些发行版均是基于Apache Hadoop衍生出来的，之所以有这么多的版本，完全是由Apach 阅读全文

摘要： 本节内容： Flume简介 Flume NG核心组件 Flume部署种类 Flume单机安装 一、Flume简介 Flume是一个分布式、可靠、高可用的海量日志聚合系统，支持在系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据的简单处理，并写到各种数据接收方的能力。 Flume在0. 阅读全文

摘要： 本节内容： Apache Storm是什么 Apache Storm核心概念 Storm原理架构 Storm集群安装部署 启动storm ui、Nimbus和Supervisor 一、Apache Storm是什么 Apache Storm是自由开源的分布式实时计算系统，擅长处理海量数据，适用于数据 阅读全文