摘要:
一、程序、进程和线程的理解 程序:就相当于一个应用(app),例如电脑上打开的一个程序。 进程:程序运行资源(内存资源)分配的最小单位,一个程序可以有多个进程。 线程:cpu最小的调度单位,必须依赖进程而存在。线程没有独立资源,所有线程共享该进程的全部资源。线程的划分尺度比进程更小。 关系: 一个程 阅读全文
posted @ 2020-02-18 20:40
F来日可期
阅读(181)
评论(0)
推荐(0)
摘要:
1、通过user-agent客户端标识来判断是不是爬虫 解决::在请求头中封装user-agent 2、禁止ip访问 解决::设置代理ip,封ip主要的原因是请求太频繁。 3、通过访问频率来判断是正常请求还是爬虫 解决::设置爬取间隔和爬取策略,例如每隔几秒爬取一次,在固定的时间段爬取 4、访问时设 阅读全文
posted @ 2020-02-18 20:25
F来日可期
阅读(251)
评论(0)
推荐(0)

浙公网安备 33010602011771号