scrapy 去重 dont_filter=False

yield Request(...... 

dont_filter=False)


posted @ 2018-10-03 19:09  CrossPython  阅读(3489)  评论(0)    收藏  举报