摘要: 本次迁移采用了唯品会的开源工具RMT 1.阿里云redis服务器的购买 注:要和生产上数据的内存大小一致 不然有些key会迁移失败 很明显的OOM报错 2.迁移机器的cpu要足够 迁移会有一段时间的负载上升 对迁移机器的IOPS有要求 rmt_redis.c:1474 Error: I/O erro 阅读全文
posted @ 2018-10-24 11:12 gzcheng 阅读(863) 评论(0) 推荐(0) 编辑
摘要: 从了解ELK到搭建再到业务新建到现在也有6个月了,一直没有总结过es的查询语法,每次查询都要在网上找一波,上周接到一个任务,统计nginx日中所有域名的pv统计值,刚开始还准备用python调用elasticsearch模块去遍历某个索引下的所有日志,然后筛选相关内容进行整合(使用了scroll函数 阅读全文
posted @ 2018-10-22 10:25 gzcheng 阅读(1893) 评论(0) 推荐(0) 编辑
摘要: curl -XPOST "100.98.210.20:9200/logstash-2018.10.17/_search?pretty" -d '{ "size" : 0, 是否返回参考数据 "aggs": { 默认参数 "all_hostname": { 自定义返回名字 "terms":{ 默认 " 阅读全文
posted @ 2018-10-18 09:07 gzcheng 阅读(1149) 评论(0) 推荐(0) 编辑
摘要: 利用python获取某个索引的全部字段时 第一次查询可以得到结果 但是再次利用scroll-id继续查的时候报错 阅读全文
posted @ 2018-10-17 15:25 gzcheng 阅读(2176) 评论(0) 推荐(0) 编辑
摘要: 1.ftp服务以及IIS服务的开启 开始>控制面板>程序和功能>启用或关闭Windows功能 开启ftp和iis功能 找到Internet information Services 将 FTP相关服务点选 IIS管理控制台点选 然后确定 出现如下界面表示FTP服务开启成功。 2.打开IIS管理控制器 阅读全文
posted @ 2018-10-12 12:41 gzcheng 阅读(544) 评论(0) 推荐(0) 编辑
摘要: 1.环境准备:yum -y install make gcc gcc-c++ kernel-devel m4 ncurses-devel openssl-devel unixODBC unixODBC-devel httpd python-simplejson2.erlang安装:wgethttp: 阅读全文
posted @ 2018-10-10 10:21 gzcheng 阅读(1549) 评论(0) 推荐(0) 编辑
摘要: 1.模块介绍 n个.py文件组成了模块 2.如何自定义模块 导入自定义模块 其实就是告诉python解释器 去解释那个python文件 导入一个.py文件 解释器解释这个python程序 导入一个包 解释器解释__init.py__文件 自定义模块就是 定义相关的程序文件 或者相关的程序包 但是值得 阅读全文
posted @ 2018-09-18 13:58 gzcheng 阅读(129) 评论(0) 推荐(0) 编辑
摘要: 一、迭代器 1.Iterable(可迭代的) 我们已经知道可以直接作用于for循环的数据类型有以下几种: 一类是集合数据类型:list tuple dict set str 等 一类是generator 包括生成器和带yield的generator function 这些可以直接作用于for循环的对 阅读全文
posted @ 2018-09-10 14:46 gzcheng 阅读(183) 评论(0) 推荐(0) 编辑
摘要: 1.set set是一个无序且元素不会重复的集合 #创建 set1={1,2} or l = [1,2,3.3] set2= set(l) #方法 set2.add() 添加元素 set2.clear() 清楚元素 set2.difference() 两个集合 的差集 set1.difference 阅读全文
posted @ 2018-09-03 10:40 gzcheng 阅读(183) 评论(0) 推荐(0) 编辑
摘要: python中 一切都是对象 对象都是由类创建的 一 整型 方法: 1 1.bit_length () 返回该数转换为二进制数的最小占位 2 n = 11 3 print (n.bit_length()) 4 2.__abs__() 返回绝对值 5 n = -11 6 print (n.__abs_ 阅读全文
posted @ 2018-08-14 17:01 gzcheng 阅读(110) 评论(0) 推荐(0) 编辑