爬虫随机生成useragent
摘要：
安装fake-useragent pip install fake-useragent 阅读全文
posted @ 2019-04-11 17:54 s-p-l 阅读(160) 评论(0) 推荐(0) 编辑
通信协议 -- HTTP、TCP、UDP
摘要：
CP HTTP UDP: 都是通信协议，也就是通信时所遵守的规则，只有双方按照这个规则，对方才能理解并为之服务 TCP HTTP UDP三者的关系： TCP/IP是一个协议组，可分为四个层次：网络接口层、网络层、传输层和应用层 在网络层有IP协议、ICMP协议、ARP协议和BOOTP协议 在传输层有 阅读全文
posted @ 2019-04-04 18:06 s-p-l 阅读(883) 评论(0) 推荐(0) 编辑
linux kill关闭进程命令
摘要：
杀死进程最安全的方法是单纯使用kill命令，不加修饰符，不带标志。 首先使用ps -ef命令确定要杀死进程的PID，然后输入以下命令：kill -pid ps -ef | grep 进程名 如：ps -ef | grep python 查看python运行了那些进程 ps -ef | grep 进程 阅读全文
posted @ 2019-03-31 21:57 s-p-l 阅读(48238) 评论(0) 推荐(0) 编辑
Linux下查看使用的是哪种shell的方法汇总
摘要：
https://www.jb51.net/LINUXjishu/247797.html 阅读全文
posted @ 2019-03-31 18:29 s-p-l 阅读(111) 评论(0) 推荐(0) 编辑
更新yum源
摘要：
以网易yum源为例，如将centos下更换系统默认yum源为网易yum源： 1、备份原有的默认yum源 cp /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.bak 2、修改centos-base.repo文件， 阅读全文
posted @ 2019-03-31 18:16 s-p-l 阅读(412) 评论(0) 推荐(0) 编辑
centos 7 配置yum源
摘要：
yum： 全称为 Yellowdog Updater, Modified）是一个在Fedora和RedHat以及CentOS中的Shell前端软件包管理器。基于RPM包管理，能够从指定的服务器自动下载RPM包并且安装，可以自动处理依赖性关系，并且一次安装所有依赖的软件包，无须繁琐地一次次下载、安装。 阅读全文
posted @ 2019-03-31 17:52 s-p-l 阅读(181) 评论(0) 推荐(0) 编辑
Unicode码对应的中文
摘要：
在爬虫中经常会碰到爬取结果输出为中文，以下为解决办法： 先检查输出text的类型： 若type(text)为str，则 若type(text)为bytes，则 阅读全文
posted @ 2019-01-18 23:35 s-p-l 阅读(284) 评论(0) 推荐(0) 编辑
