摘要：安装crypto python3里面这个改成了pycryptodome 1. pip3 install pycryptodome 或者 pip3 install -i https://pypi.douban.com/simple pycryptodome 阅读全文

摘要：scrapy设置ua池 设置后在setting启用 scrapy设置ip池 scrapy 设置自定义cookie：class LaogouwangSpider(scrapy.Spider): scrapy提供五种日志级别。 阅读全文

摘要：目前，一般实现文件图片上传的方式都是有一个按钮，点击之后直接调用操作系统自身的弹框，选择文件后，实现上传。因为Selenium不支持调用操作系统的操作，所以这种情况下，利用Selenium无法完成图片上传，这时，我们可以选择autoit实现。 autoit可以操控控件 下载地址 ：https://w 阅读全文

摘要：使用scrapy爬取整个网站的图片数据。并且使用 CrawlerProcess 启动。 1 # -*- coding: utf-8 -* 2 import scrapy 3 import requests 上面的是spider文件 上面的是item文件 这上面是管道文件 这是在setting里面的， 阅读全文