摘要: 分了3个文件, -config 存放一些信息及配置 -proxy_pool 抓取代理 -get_mzitu 爬取网页 使用前需要安装redis数据库 https://redis.io/download config文件 #设置user_agent条目 USER_AGENTS = [ "Mozilla 阅读全文
posted @ 2019-12-26 16:55 lijifei 阅读(1118) 评论(0) 推荐(0)
摘要: cannot unpack non-iterable NoneType object 解决方法:报错的原因是函数返回值得数量不一致,查看函数返回值数量和调用函数时接收返回值的数量是不是一致,修改一致即可 阅读全文
posted @ 2019-12-26 14:49 lijifei 阅读(3022) 评论(0) 推荐(0)