scrapy 去重 dont_filter=False

yield Request(...... 

dont_filter=False)


posted @ 2018-10-03 19:09  CrossPython  阅读(3477)  评论(0)  编辑  收藏  举报