摘要：douban.py # -*- coding: utf-8 -*- import scrapy from scrapy.linkextractors import LinkExtractor from book.items import DoubanItem from scrapy.utils.pr 阅读全文

摘要：'''由于mitmdump不是通过pip3下载的，mitmdump在执行的时候会临时创建一个python环境， 第三方库无法导入，所以要加入一个包所在的路径，让mitmdump能使用第三方库。 检查脚本所使用的python环境： import sys print(sys.path) ''' impo 阅读全文

摘要：代码： import requests from pyquery import PyQuery as pq import csv from threading import Thread,Lock import time import os def get_one_url(url): try: he 阅读全文