摘要:事件背景 2020年9月25日18点18分,收到告警,大数据02节点宕机,发现此问题出现过3次,分别在生成大数据服务器的2个节点上发生。这次决心要查处问题。 服务是CDH节点,就是大数据那一套东西。 系统版本:CentOS Linux release 7.3.1611 内核版本:3.10.0-514 阅读全文
posted @ 2020-09-27 18:31 大胖猴 阅读(16) 评论(0) 推荐(0) 编辑
摘要:文件上传漏洞是什么 关键字:绕过 文件上传是大部分Web应用都具备的功能,例如用户上传附件,改头像,分享图片等 文件上传漏洞是在开发者没有做充足验证(包括前端、后端)情况下,运行用户上传恶意文件,这里上传的文件可以使木马、病毒、恶意脚本或者Webshell等 环境搭建(及靶机) # 第一次启动 do 阅读全文
posted @ 2020-07-23 15:12 大胖猴 阅读(83) 评论(0) 推荐(0) 编辑
摘要:Web App是什么 Web App 是运行与网络和标准浏览器上,基于网页技术开发实现特定功能的应用。 前端:HTML CSS JavaScript 后端:Java Python PHP 数据库:Mysql Oracle 容器:IIS,Apache Nginx 协议:TCP DNS HTTP HTT 阅读全文
posted @ 2020-07-20 21:07 大胖猴 阅读(46) 评论(0) 推荐(0) 编辑
摘要:搜索特点站点信息 关键字site: 用法:site: 站点名称 site:www.cnblogs.com 搜索URL中包涵有指定字符的网址 关键字inurl: 用法:inurl:关键字 inutl:passlist.txt 两个组合查询,我想搜索github上的passlist.txt的页面 搜索g 阅读全文
posted @ 2020-07-10 11:27 大胖猴 阅读(61) 评论(0) 推荐(0) 编辑
摘要:分布式特性 Elasticsearch的分布式带来的好处: 存储的水平扩容 提供系统的可用性,部分节点停止服务,整个集群不受影响 Elasticsearch的分布式架构 不同集群通过不同集群名称区分,默认"elasticsearch" 通过配置文件修改,或者在命令行中-E cluster.name= 阅读全文
posted @ 2020-01-02 21:34 大胖猴 阅读(642) 评论(0) 推荐(0) 编辑
摘要:什么是文档 Elasticsearch是面向文档的,文档是可搜索数据区的最小单元,例如:日志文件中的日志项,一个电影的详细信息等。在Elasticsearch中文档被序列化为包含键值对的 JSON 对象。 一个 键 可以是一个字段或字段的名称,一个 值 可以是一个字符串,一个数字,一个布尔值, 另一 阅读全文
posted @ 2019-12-26 20:54 大胖猴 阅读(1085) 评论(0) 推荐(0) 编辑
摘要:准备工作 安装依赖 修改内核参数 配置K8S源 安装docker 安装kubernetes 下载kubeadm,kubelet 初始化kubeadm 这里不直接初始化,因为国内用户不能直接拉取相关的镜像,所以这里想查看需要的镜像版本 根据需要的版本,直接拉取国内镜像,并修改tag 运行脚本,拉取镜像 阅读全文
posted @ 2019-11-12 13:34 大胖猴 阅读(404) 评论(0) 推荐(0) 编辑
摘要:文件常用IO操作 打开操作 open(file, mode='r', buffering=-1, encoding=None, errors=None, newline=None, closefd=True, opener=None)打开一个文件,返回一个文件对象(流对象)和文件描述符。开发文件失败 阅读全文
posted @ 2019-08-26 16:01 大胖猴 阅读(101) 评论(0) 推荐(0) 编辑
摘要:functools模块 reduce方法: reduce方法 reduce方法,顾名思义就是减少 可迭代对象不能为空,初始值没提供就在可迭代对象中去一个元素 reduce方法,顾名思义就是减少 可迭代对象不能为空,初始值没提供就在可迭代对象中去一个元素 partial方法: 偏函数,把函数部分的参数 阅读全文
posted @ 2019-08-20 14:11 大胖猴 阅读(113) 评论(0) 推荐(0) 编辑
摘要:函数定义的弊端 python 是动态语言,变量随时可以被赋值,且能赋值为不同类型 python 不是静态编译型语言,变量类型是在运行器决定的 动态语言很灵活,但是这种特性也是弊端 难发现:由于不做任何类型检查,直到运行期问题才显现出来,或者线上运行时才能暴露出问题 难使用:函数的使用者看到函数的时候 阅读全文
posted @ 2019-08-20 13:56 大胖猴 阅读(2813) 评论(0) 推荐(0) 编辑
摘要:需求 一个加法函数,想增强它的功能,能够输出被调用过以及调用过参数的信息 以上函数完成了需求,但是存在以下缺点: 打印语法的耦合太高 加法函数属于业务功能,而输出信息的功能,属于非业务功能代码,不该放在业务函数加法中 业务功能分离 但这里fn调用传参是个问题 解决传参的问题 柯里化 装饰器语法糖 @ 阅读全文
posted @ 2019-08-19 17:25 大胖猴 阅读(91) 评论(0) 推荐(0) 编辑
摘要:高阶函数 First Class Object 函数在python中是一等公民 函数也是对象,可调用的对象 函数可作为普通变量、参数、返回值等等 高阶函数 数学概念 y=g(f(x)) 在数学和计算机科学中,高阶函数应当是至少满足下面一个条件的函数 接受一个或多个函数作为参数 输出一个函数 接受一个 阅读全文
posted @ 2019-08-19 13:30 大胖猴 阅读(134) 评论(0) 推荐(0) 编辑
摘要:生成器generator 生成器指的是生成器对象,可以由生成器表达式得到,也可以使用yield关键字得到一个生成器函数,调用这个函数得到一个生成器对象 生成器函数 函数体中包含yield语句的函数,返回生成器对象 生成器对象,是一个可迭代对象,是一个迭代器 生成器对象,是延迟计算,惰性求值 举例: 阅读全文
posted @ 2019-08-16 17:03 大胖猴 阅读(188) 评论(0) 推荐(0) 编辑
摘要:1、理解函数执行流程 执行结果 全局帧中生成foo1、foo2、foo3、main函数对象 main函数调用 main中查找内建函数print压栈,将常量字符串压栈,调用函数,弹出栈顶 main中全局查找函数foo1压栈,将常量100、101压栈,调用函数foo1,创建栈帧,print函数压栈,字符 阅读全文
posted @ 2019-08-14 14:41 大胖猴 阅读(128) 评论(0) 推荐(0) 编辑
摘要:函数返回值 多条return语句: 总结: python函数使用return语句返回“返回值” 所有函数都有返回值,如果没有return语句,隐式调用return None return 语句并不一定是函数的语句块的最后一条 一个函数可以存在多个return语句,但只有一条可以被执行,如果没有一条r 阅读全文
posted @ 2019-07-25 13:54 大胖猴 阅读(1439) 评论(0) 推荐(0) 编辑