11 2019 档案
摘要：前面做了关于ELK组件的各个实验，但是并没有真正的把各个组件结合起来做一个实验，现在使用一个脚本简单的生成日志，模拟生产不断产生日志的效果 一 流程说明 使用脚本产生日志，模拟用户的操作 日志的格式 [INFO] 2019-11-30 18:00:20 [cn.success.dashboard.M
阅读全文
摘要：一 logstash安装 1.1下载包 [root@node1 ~]# cd /usr/local/src/ [root@node1 src]# wget https://artifacts.elastic.co/downloads/logstash/logstash-7.4.2.tar.gz [r
阅读全文
摘要：Logstash事件处理管道包括三个阶段：输入→过滤器→输出。输入会生成事件，过滤器会对其进行修改，输出会将它们发送到其他地方。输入和输出支持编解码器，使您可以在数据进入或退出管道时对其进行编码或解码，而不必使用单独的过滤器。 1 输入 您可以使用输入将数据获取到Logstash。一些更常用的输入是
阅读全文
摘要：Logstash是具有实时流水线功能的开源数据收集引擎。Logstash可以动态统一来自不同来源的数据，并将数据规范化为您选择的目标。清除所有数据并使其民主化，以用于各种高级下游分析和可视化用例。 虽然Logstash最初推动了日志收集方面的创新，但其功能远远超出了该用例。任何类型的事件都可以通过各
阅读全文
摘要：一 metricbeat仪表盘 1.1 安装metricbeat仪表盘 可以将metricbeat数据在kibana中展示 [root@node4 ~]# cd /usr/local/metricbeat/ [root@node4 metricbeat]# grep -Ev "^$|[#;]" me
阅读全文
摘要：一 简介 Kiana是一款开源的数据分析和可视化平台，它是 Elastic Stack成员之一，设计用于和 Elasticsearch协作。您可以使用 Kiana对 Elasticsearch索引中的数据进行搜索、查看、交互操作。您可以很方便的利用图表、表格及地图对数据进行多元化的分析和呈现 基本内
阅读全文
摘要：一 Metricbeat 简介 1.1 系统级监控，更简洁将 Metricbeat 部署到您的所有 Linux、Windows 和 Mac 主机，并将它连接到 Elasticsearch 就大功告成了：您可以获取系统级的 CPU 使用率、内存、文件系统、磁盘 IO 和网络 IO 统计数据，还可针对系
阅读全文
摘要：一 Filebeat工作原理 Filebeat由两个主要组件组成: prospector和 harvester 1.1 harvester 负责读取单个文件的内容 如果文件在读取时被制除或重命名， Filebeat将继续读取文件。 1.2 prospector prospector负责管理 harv
阅读全文
摘要：一 背景需求 Nginx是一个非常优秀的web服务器，往往Nginx服务会作为项目的访问入口，那么，nginx的性能保障就会变得非常重要，如果nginx的运行出现了问题就会对项目有较大的影响，所以，我们需要对nginx的运行有监控措施，实时掌握Nginx的运行情况，那就需要收集Nginx的运行指标和
阅读全文
摘要：一 集群节点 Elstaicsearch的集群是由多个节点组成都，通过cluster.name设置集权名称，比能切用与区分其他的集群，每个节点通过node.name指定节点 在Elasticsearch中，接待你的类型主要有4种 1.1 master节点 配置文件中的node.master属性为tr
阅读全文
摘要：前面已经介绍了Elasticsearch这个工具，并对单机安装做了简单介绍，现在使用三台机器做一个elasticsearch集群 一 环境准备 1.1 机器准备 1.2 同步时间 [root@node* ~]# ntpdate ntp1.aliyun.com 23 Nov 20:45:52 ntpd
阅读全文
摘要：一 简介 ElasticSearch是一个基于Luncene的搜索服务器。它提供了一个分布式多用户能力全文搜索引擎，基于RESTful web接口，ElsticSearch使用Java开发的，并作为Apache许可下的开源码发布，是当前流行的企业级搜索引擎，设计用域云计算中，能够达到实时搜索，稳定可
阅读全文
摘要：1 背景介绍 在我们日常生活中，我们经常需要回顾以前发生的一些事情；或者，当出现了一些问题的时候，可以从某些地方去查找原因，寻找发生问题的痕迹。无可避免需要用到文字的、图像的等等不同形式的记录。用计算机的术语表达，就是 LOG，或日志。 日志，对于任何系统来说都是及其重要的组成部分。在计算机系统里面
阅读全文
摘要：在实际生产中，我们经常会需要通过判断一个结果作为一个条件去执行另一个内容，比如判断一个文件是否存在，判官一个命令是否执行成功等等 现在我们选择其中一个场景进行实验，当某个目录下存在，则执行操作 1. 下载一个文件 [root@node1 ~]# cd /opt/ [root@node1 opt]#
阅读全文
摘要：前面学习了参数的传递和调用，下面研究一下根据参数作为条件执行不同的stage 使用叫when 和expression控制某一个stage的运行， 运行场景例如写了多个stage，这个pipeline脚本执行执行冒烟测试，和集成测试。有时候，希望快速执行冒烟测试，想根据结果看看，不一定一上来就执行集成
阅读全文
摘要：前面介绍了很多关于mysql的文章，下面主要介绍一下mysql8的源码编译安装 一 基本环境 [root@CentOS-7-x86-64-Minimal-1810 ~]# cd /usr/local/src/ [root@CentOS-7-x86-64-Minimal-1810 src]# cat
阅读全文
摘要：1 if控制语句 使用一个简单的If控制语句 pipeline { agent any stages { stage('flow control') { steps { script { if ( 10 == 10) { println "pass" }else { println "failed"
阅读全文
摘要：在jenkins可能会有战役中场景，就是在一个job执行完之后，把这个执行结果作为另一个job的执行条件 比如A执行完，如果A执行成功，则执行B，如果失败则执行C 1 前期准备 A任务 import hudson.model.*; pipeline{ agent any environment {
阅读全文
摘要：一 镜像的分层特性 在说docker的文件系统之前，我们需要先想清楚一个问题。我们知道docker的启动是依赖于image，docker在启动之前，需要先拉取image，然后启动。多个容器可以使用同一个image启动。那么问题来了：这些个容器是共用一个image，还是各自将这个image复制了一份，
阅读全文
摘要：在上一篇学习了把参数写进Json文件，然后通过去Json文件，调用参数的方法 1. 三元运算符介绍 调用的方法是通过一个三元运算符实现的 gender = prop.GENDER? prop.GENDER.trim() : "" is_marry = prop.IS_MARRY? prop.IS_M
阅读全文
摘要：因为最近使用Pipeline声明式语法构建项目，但是最近项目的参数设置较多，特地的来学习一下关于参数的调用和测试，主要式从一个大神那里学习的，结尾回贴上大神的博客链接 1 构建一个pipeline项目 2 编写jenkinsfile文件 import hudson.model.*; pipeline
阅读全文
摘要：一 简介 Flannel是一种基于overlay网络的跨主机容器网络解决方案，也就是将TCP数据包封装在另一种网络包里面进行路由转发和通信， Flannel是CoreOS开发,专门用于docker多机互联的一个工具,让集群中的不同节点主机创建的容器都具有全集群唯一的虚拟ip地址 Flannel使用g
阅读全文
摘要：一 简介 当Docker进程启动时，会在主机上创建一个名为docker0的虚拟网桥，此主机上启动的docker容器会连接到这个虚拟网桥上。虚拟网桥的工作方式和物理交换机类似，这样主机上的所有容器就通过交换机连接在了一个二层网络中。从docker0子网中分配一个ip给容器使用，并设置docker0的i
阅读全文
摘要：一 简介 docker提供数据卷来实现数据共享与持久化，而数据卷的挂载有两种方式： 挂载主机目录（Bind mounts） 数据卷容器（Data Volumes） 数据卷是一个可供容器使用的特殊目录，它绕过文件系统，可以提供很多有用的特性： 数据卷可以在容器之间共享和重用 数据卷是目录或者文件,而非
阅读全文
摘要：一 Docker的基本信息 前面已经安装了Docker，现在看一下已安装Docker的安装环境以及其他信息 1.1 系统环境 [root@docker-server3 ~]# uname -r 3.10.0-957.27.2.el7.x86_64 [root@docker-server3 ~]# c
阅读全文
摘要：一 Docker简介 1.1 docker由来 Docker的英文翻译是“码头工人”，即搬运工，它搬运的东西就是我们常说的集装箱Container，Container里面装的是任意类型的App。我们的开发人员可以通过Docker将App变成一种标准的、可移植的、自管理的组件，我们可以在任何主流的操作
阅读全文
摘要：一 环境准备 1.1 安装插件Email Extension 系统管理-管理插件-安装Email Extension插件 1.2 配置 配置jenkins邮箱的全局配置：系统管理-系统设置-完成邮箱配置-测试是否配置正确，然后配置扩展邮件功能 完成项目job的邮箱配置：配置-增加构建后操作步骤Edi
阅读全文
摘要：1.登陆QQ邮箱 2. 在“帐户”里开启“POP3/SMTP”并获取授权码 3. 发送短信验证验证后得到下面验证码 aeoygabszxfecbdj #验证吗 点击确定之后，服务已经开启 4. Jenkins配置 在Jenkins的“系统管理”->“系统设置”中的“邮件通知”中设置邮件服务器相关的参
阅读全文
摘要：上一篇创建了一个centos的容器，而且已经安装了openssh [root@node6 ~]# docker ps -a f2320c5d3c54 centos "/bin/bash" 40 minutes ago Exited (0) 12 seconds ago compassionate_e
阅读全文
摘要：前面在部署容器，使用docker容器作为jenkins的Slave节点时，会发现在使用centos作为镜像源拉去容器，不能正常连接，最后是因为centos的sshd的问题 下面专门是centos容器安装sshd的实验 1. 拉去centos的镜像 [root@node6 ~]# docker pul
阅读全文
摘要：前面实验了使用docker搭建一个jenkins，下面实验使用docker作为jenkins的slave节点 1. 环境准备 一个运行Docker的主机或者群集 Jenkins应该能访问互联网，方便安装插件。 Jenkins服务器能够和GitHub通信。 Jenkinss对Java所需要的Git,和
阅读全文
摘要：一 基础环境准备 [root@node6 ~]# cat /etc/redhat-release CentOS Linux release 7.6.1810 (Core) [root@node6 ~]# yum -y install epel-release [root@node6 ~]# yum
阅读全文
摘要：数据库已经安装完成，可以正常登陆查看用户等操作 system用户只能用normal身份登陆em。除非你对它授予了sysdba的系统权限或者syspoer系统权限。 sys用户具有“SYSDBA”或者“SYSOPER”权限，登陆em也只能用这两个身份，不能用normal。 sys所有oracle的数据
阅读全文
摘要：1. 分支策略 持续集成中使用的分支策略包括以下三个： The master branch The integration branch The feature branch 而CD只在Integration的release上分支上执行即可。 2. Release 分支 一些团队采用发布分支的策略。
阅读全文
摘要：持续集成不仅包含了Jenkins或者相关其它的CI工具，也包含了包含代码如何控制，采用的什么分支策略等。不同的组织可能采用不同的类型的策略来完成CI，策略类型和项目的类型的有很大的关系。 一 分支策略 1.1 本实验分支 分支能够有效的对代码较好的管理，也是能够把工作的代码和开发环境的代码隔离的有效
阅读全文
摘要：前言 前面已经有介绍sonar的安装，简单应用，下面在简答的研究一下sonar和jenkins集成的简单使用，对于sonar的安装不做介绍 一 sonar的简单介绍 持续检查避免了低质量的代码，比如SonarQube工具就能够帮助我们完成此项。每次代码提交后，在代码上就会执行代码分析。 分析是基于代
阅读全文
摘要：需要一种机制去存储所有的二进制代码（build,packages,third-party plugins等）到类似于版本控制系统的系统。 像Git，SVN存储代码，它们存储的往往是源代码，不是二进制文件。Artifactory或者Nexus就是和Jenkins紧密集成的二进制文件存储库系统。 可以带
阅读全文
浙公网安备 33010602011771号