随笔分类 -  python 运维开发

摘要:一、摘要 在这篇文章中: https://www.cnblogs.com/xiao987334176/p/9330368.html#autoid-4-5-2 介绍了使用 xlrd 模块,读取指定坐标的单元格,以及循环整个表格。 还没有介绍如何读取指定的列。 二、举例 目前有一张水果报价表,内容如下: 阅读全文
posted @ 2019-07-22 18:34 肖祥 阅读(42053) 评论(0) 推荐(0)
摘要:一、摘要 使用 xlrd 模块打开带中文的excel文件时,会报错。 FileNotFoundError: [Errno 2] No such file or directory: 'xx.xlsx' 这个时候,就需要检测文件名,是否包含中文,及时return。 二、原理 中文字符的编码范围是: \ 阅读全文
posted @ 2019-07-19 18:18 肖祥 阅读(30535) 评论(2) 推荐(1)
摘要:一、PMM架构 Percona Monitoring and Management是percona一款开源的用于管理和监控MySQL 和MongoDB性能的开源平台,通过PMM客户端收集到的DB监控数据用第三方软件Grafana画图展示出来,包括两个部分: PMM client:部署在每个监控数据库 阅读全文
posted @ 2019-07-17 16:52 肖祥 阅读(10837) 评论(0) 推荐(0)
摘要:一、摘要 Linux服务器上我们用Logrotate来分割归档日志文件,结合crond我们可以指定每天在某个时间自动整理日志等文档。本文主要说明了Centos下Logrotate的使用和配置的方法。 配置文件 Logrotate的配置文件位于 /etc/logrotate.conf。Logrotat 阅读全文
posted @ 2019-07-15 19:13 肖祥 阅读(2245) 评论(0) 推荐(0)
摘要:一、mysqld_exporter安装 下载页面 https://github.com/prometheus/mysqld_exporter/releases 下载最新版本 https://github.com/prometheus/mysqld_exporter/releases/download 阅读全文
posted @ 2019-07-13 16:14 肖祥 阅读(2001) 评论(0) 推荐(0)
摘要:一、摘要 promethues监控nginx可选两个exporter,通过nginx_exporter主要是获取nginx-status中的内建的指标,nginx自身提供status信息,较为简单,promethues中对应的metrics也较少,想要监控更多的指标可以通过nginx-vts-exp 阅读全文
posted @ 2019-07-12 15:00 肖祥 阅读(4343) 评论(2) 推荐(1)
摘要:一、简介 Paramiko模块是基于Python实现的SSH远程安全连接,用于SSH远程执行命令、文件传输等功能。 安装模块 默认Python没有自带,需要手动安装: 二、上传文件 测试一下上传,完整代码如下: #!/usr/bin/env python3 # coding: utf-8 impor 阅读全文
posted @ 2019-06-30 17:42 肖祥 阅读(8360) 评论(0) 推荐(2)
摘要:一、使用场景 如果每次都在本机上面写代码,然后传到服务器上面,在服务器上面运行就太麻烦了。这样的方式十分繁琐,效率很低。 因此,希望可以像下面一样操作: 可以直接在本机上码代码 自动将代码同步到远程服务器上面 本机路径 D:\python_project\bmt 远程linux路径 (192.168 阅读全文
posted @ 2019-06-26 18:04 肖祥 阅读(6433) 评论(0) 推荐(1)
摘要:一、问题描述 在Django视图函数中,导入 gevent 模块 启动Django报错: 原因在于执行这行 monkey.patch_all() 代码时报错了。 既然Django不能使用协程,那我需要使用异步执行,怎么办? 请看下文 二、进程池、线程池与异步调用、回调机制 进程池、线程池使用案例 进 阅读全文
posted @ 2019-06-25 14:19 肖祥 阅读(1947) 评论(0) 推荐(0)
摘要:一、SSL协议加密方式 SSL协议即用到了对称加密也用到了非对称加密(公钥加密),在建立传输链路时,SSL首先对对称加密的密钥使用公钥进行非对称加密,链路建立好之后,SSL对传输内容使用对称加密。 1.对称加密 速度高,可加密内容较大,用来加密会话过程中的消息。 2.公钥加密 加密速度较慢,但能提供 阅读全文
posted @ 2019-06-17 17:56 肖祥 阅读(21571) 评论(0) 推荐(0)
摘要:一、问题描述 修改 /etc/security/limits.conf ,重启之后不生效 内容如下: 二、解决问题 根据网上资料的说法有几种 1. 修改 /etc/ssh/sshd_config 开启这2项 2. 以下几个文件 确保开启了pam_limits.so 3. 重启系统 注意:修改了/et 阅读全文
posted @ 2019-06-12 12:02 肖祥 阅读(3989) 评论(0) 推荐(0)
摘要:一、简介 这次给大家介绍下MySQL官方最新版本5.7.17中GA的新功能 Group Replication 。 Group Replication是一种可用于实现容错系统的技术。复制组是一组通过消息传递相互交互的服务器。通信层提供一组保证,例如原子消息和总订单消息传递。这些是非常强大的属性,可以 阅读全文
posted @ 2019-06-09 21:38 肖祥 阅读(699) 评论(0) 推荐(0)
摘要:一、需求 现在有一个场景,需要每月的最后一天,发送一封邮件。 二、获取本月最后一天 有没有办法使用Python的标准库轻松确定(即一个函数调用)给定月份的最后一天? 答案是有的,使用 datetime 就可以实现 #!/usr/bin/env python # coding: utf-8 impor 阅读全文
posted @ 2019-05-27 21:24 肖祥 阅读(12783) 评论(0) 推荐(1)
摘要:一、简述 microk8s不通过虚拟机但与主机隔离方式,快速轻巧安装Kubernetes。通过在单个快照包中打包Kubernetes,Docker.io,iptables和CNI的所有上游二进制文件来实现此隔离。 snap包是一个应用程序容器 - 您可以将其想象为Docker容器的轻量级版本。它使用 阅读全文
posted @ 2019-05-26 16:11 肖祥 阅读(7728) 评论(0) 推荐(1)
摘要:一、需求分析 有一批key已经写入到3个txt文件中,每一个txt文件有30万行记录。现在需要读取这些txt文件,判断key是否在数据仓库中。(redis或者mysql) 为空的记录,需要写入到日志文件中! 任务分工 1. 使用多进程技术,每一个进程读取一个txt文件 2. 使用协程技术,批量读取t 阅读全文
posted @ 2019-05-24 18:48 肖祥 阅读(4218) 评论(0) 推荐(0)
摘要:一、连接redis集群 python的redis库是不支持集群操作的,推荐库:redis-py-cluster,一直在维护。还有一个rediscluster库,看GitHub上已经很久没更新了。 安装 连接redis集群 #!/usr/bin/env python # coding: utf-8 f 阅读全文
posted @ 2019-05-23 11:46 肖祥 阅读(3685) 评论(0) 推荐(1)
摘要:一、需求分析 需要统计出当前数据库的所有数据库名,以及每个用户的授权信息。 获取所有数据库 在mysql里面,使用命令: 就可以获取所有数据库了 获取所有用户 执行命令: 注意:需要排除到默认的用户,比如: 获取用户权限 语法: 比如: 执行输出: 注意:这段信息表示,test用户,对DB01数据库 阅读全文
posted @ 2019-05-21 16:38 肖祥 阅读(1728) 评论(0) 推荐(0)
摘要:一、问题描述 现在有一段代码,需要扫描一个网段内的ip地址,是否可以ping通。 执行起来效率太慢,需要使用协程。 #!/usr/bin/env python # -*- coding: utf-8 -*- import os import time import signal import sub 阅读全文
posted @ 2019-05-18 16:38 肖祥 阅读(8217) 评论(0) 推荐(0)
摘要:一、需求分析 注意: 本环境使用 elasticsearch 7.0版本开发,切勿低于此版本 mysql 表结构 有一张表,记录的数据特别的多,需要将7天前的记录,插入到Elasticsearch中,并删除原有表7天前的记录。 表结构如下: CREATE TABLE `historic_record 阅读全文
posted @ 2019-05-17 12:09 肖祥 阅读(2702) 评论(0) 推荐(0)
摘要:一、使用subprocess模块 使用subprocess模块可创建子进程。 subprocess.Popen(['google-chrome',"http://www.baidu.com"])可打开chrome并显示百度网页。 subprocess.Popen.pid可显示子进程的id,但这只是打 阅读全文
posted @ 2019-05-15 09:47 肖祥 阅读(10224) 评论(0) 推荐(1)