摘要:
# -*- coding: utf-8 -*- import scrapy from Avv.items import AvvItem class AvSpider(scrapy.Spider): name = 'av' # 爬虫名 allowed_domains = ['51porn.net/'] 阅读全文
posted @ 2019-01-06 16:38
桃妖妖
阅读(4718)
评论(0)
推荐(0)
摘要:
这个代码爬百度,淘宝,网易等网站都是正常的,唯有这个网站错误,网上查了好多,有说添加verify=False,有说"Connection": "close",都没有用,求大神帮解决一下 python3.7 阅读全文
posted @ 2019-01-06 15:34
桃妖妖
阅读(3033)
评论(0)
推荐(0)
摘要:
import csv class MyProjectPipeline(object): # 保存为csv格式 def __init__(self): # 打开文件,指定方式为写,利用第3个参数把csv写数据时产生的空行消除 self.f = open("myproject.csv","a",newline="") # 设置文件第一行的字段名,注意要跟spider传过来的... 阅读全文
posted @ 2019-01-06 14:40
桃妖妖
阅读(2735)
评论(6)
推荐(0)

浙公网安备 33010602011771号