摘要:
scrapy默认是只支持http,https这些个下载,不支持ftp的(用ftp下载文件),但实际项目需求千变万化,以为http,https已经能满足99%的需求了,但遇到那1%的也必须处理的,怎么办? 好在scrapy提供插件支持,编写一个,就能搞定了。 先提供我编写的这个插件。 #! -*- encoding:utf-8 -*-#file is 'ftp.py', sys.path:'src.middleware.ftp.FtpDownloadHandler'__author__ = 'C.L.TANG'import urllib2from 阅读全文
posted @ 2012-01-12 15:57
CL.TANG
阅读(1408)
评论(0)
推荐(0)
浙公网安备 33010602011771号