摘要：$python manage.py shell >>>from app01.models import Person 新建一个对象的几种方法: 1. Person.objects.create(name="zhangsan", age=23) 2. p = Person(naem="lisi", a 阅读全文

摘要：cookies是什么 ? cookies是服务器放在用户机器上的一小块信息. cookies用来保存登录信息,这样用户就不用每次从同一台机器访问页面都要再次输入登录信息 cookie的成分 名称、值（必需）；域（网站不能访问其他域生成的cookie）、路径（将cookie的访问权限控制在服务器中的特 阅读全文

摘要：一. urllib 二. requests 阅读全文

摘要：第一种: 例子:这里我使用"http://www.simple-style.com/page/1"这个网站的爬虫 >>>scrapy shell http://www.simple-style.com/page/1 进入交互环境后,我想找到当前网页的所有src 得到很多个src后,我想只取到"/20 阅读全文

摘要：scrapy的图片管道,在ImagePipeline类中实现 ,提供了一个方便并具有额外特性的方法,来下载并本地存储图片: * 将所有下载的图片转换成通用的格式(JPG)和模式(RGB) * 避免重新下载最近已经下载过的图片 * 缩略图生成 * 检测图像的宽/高,确保它们满足最小的限制 这个管道也会 阅读全文

摘要：策略一:设置download_delay 设置下载的等待时间,减少被ban的几率 通过在setting.py文件中设置DOWNLOAD_DELAY参数，可以限制爬虫的访问频度。 DOWNLOAD_DELAY =0.25 # 250 ms of delay 通过启用RANDOMIZE_DOWNLOAD 阅读全文