09 2018 档案

python--signal

摘要：Signal:信号（signal）-- 进程之间通讯的方式，是一种软件中断。一个进程一旦接收到信号就会打断原来的程序执行流程来处理信号。 接收信号: 代码的应用: 阅读全文

posted @ 2018-09-26 13:52 eilinge 阅读(215) 评论(0) 推荐(0)

python--redis

摘要：REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。 Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。 阅读全文

posted @ 2018-09-26 13:36 eilinge 阅读(134) 评论(0) 推荐(0)

TCP/IP 协议

摘要：Transmission Control Protocol/Internet Protocol的简写，中译名为传输控制协议/因特网互联协议，又名网络通讯协议，是Internet最基本的协议、Internet国际互联网络的基础，由网络层的IP协议和传输层的TCP协议组成。TCP/IP 定义了电子设备如 阅读全文

posted @ 2018-09-26 13:17 eilinge 阅读(790) 评论(0) 推荐(0)

python--Wrapper

摘要：然后给大家介绍的是Wrapper(装饰器),使用广泛。python笔试,面试的话也会百分百问到的,基础和中级的知识储备还是必用的。 让我们开始。 先来一些基础相关知识 正题开始 固定模板 @wraps：避免被装饰函数自身的信息丢失 未添加@wraps 添加@wraps 多个装饰器的同时使用 类装饰器 阅读全文

posted @ 2018-09-26 10:49 eilinge 阅读(15228) 评论(0) 推荐(2)

python--inspect

摘要：给大家介绍下用的比较少的模块--Inspect inspect模块用于收集python对象的信息，可以获取类或函数的参数的信息，源码，解析堆栈，对对象进行类型检查等等 特定的方法调用 可以通过help()方法获取该使用函数的文本 阅读全文

posted @ 2018-09-26 10:17 eilinge 阅读(329) 评论(0) 推荐(0)

python--pexpect

摘要：大家好,最近工作比较忙,所以没时间来更新博客。趁着还没在下个版本来临之前,来这边再更新更新。是之前学习到的一些老知识点,就当来巩固一下了。开心QAQ 今天给大家介绍的是--Pexpect 基本使用流程 以下就是代码了,比较简单。但很实用 需要注意的知识点: 阅读全文

posted @ 2018-09-26 10:06 eilinge 阅读(2826) 评论(0) 推荐(0)

linux 特殊命令(一)

摘要：1.ifconfig 网卡配置:ifconfig [网络设备] [参数] 2.Ethtool 是用于查询及设置网卡参数的命令 3.moderobe/insmod 挂载内核模块 4.grep　关键字查询（grep [options] files） 5.Linux系统环境变量配置文件 阅读全文

posted @ 2018-09-25 17:58 eilinge 阅读(506) 评论(0) 推荐(0)

scrapy--BeautifulSoup

摘要：BeautifulSoup官方文档:https://beautifulsoup.readthedocs.io/zh_CN/latest/#id8 太繁琐的,精简了一些自己用的到的。 1.index.html 2..prettify()--标准的缩进格式输出 3.选择标签,属性 2.find_all 阅读全文

posted @ 2018-09-13 16:52 eilinge 阅读(475) 评论(0) 推荐(0)

scrapy--selenium

摘要：一直在学习scrapy的爬虫知识,但是遇到了动态加载页面的难题,从一开始的javascript渲染器--splash,docker服务, 遇到各种奇葩的问题： 1.docker代理设置添加无效,导致无法拉取splash镜像 2.settings.py中开启splash服务,导致无法ssl连接 然后看 阅读全文

posted @ 2018-09-13 11:59 eilinge 阅读(1144) 评论(0) 推荐(0)

python--随笔一

摘要：1.format函数--根据关键字和位置选择性插入数据 2.不使用Python内置函数对列表进行排序 3.python之json 代码实例: traceback:捕获并打印异常 快速排序 sort,sorted 阅读全文

posted @ 2018-09-10 14:12 eilinge 阅读(184) 评论(0) 推荐(0)

scrapy--多爬虫

摘要：大家好,我胡汉三又回来了!!!开心QAQ 由于最近一直在忙工作的事,之前学的一些爬虫知识忘得差不多了,只能再花多一些时间来回顾,否则根本无法前进。所以在这里也像高中老师那样提醒一下大家,--每天晚上花一点时间回顾一下,会省去很多回来再看的时间。 好了,闲话扯完了,让我们开始今天学到的知识点:一次运行 阅读全文

posted @ 2018-09-07 14:57 eilinge 阅读(472) 评论(0) 推荐(0)

scrapy--redis(分布式爬虫)

摘要：分布式爬虫:scrapy本身并不是一个为分布式爬取而设计的框架,但第三方库scrapy-redis为其扩展了分布式爬取的功能,两者结合便是一个分布式Scrapy爬虫框架。在分布式爬虫框架中,需要使用某种通信机制协调各个爬虫的工作,让每一个爬虫明确自己的任务： 前期准备:Redis的安装与基本知识(h 阅读全文

posted @ 2018-09-03 16:17 eilinge 阅读(464) 评论(0) 推荐(0)