随笔分类 -  Scrapy

Pyhton 中的 Scrapy爬虫框架
Scrapy 中 Request 对象和 Response 对象的各参数及属性介绍
摘要：Request 对象 Request构造器方法的参数列表： Request(url [, callback=None, method='GET', headers=None, body=None,cookies=None, meta=None, encoding='utf 8', priority= 阅读全文

posted @ 2019-02-21 14:20 XingLejun 阅读(6149) 评论(0) 推荐(0)

LinkExtractor 构造器各参数说明
摘要：LinkExtractor 构造器各参数说明 特例： LinkExtractor构造器的所有参数都有默认值 各参数说明： allow 接收一个正则表达式或一个正则表达式列表，提取绝对url与正则表达式匹配的链接，如果该参数为空（默认），就提取全部链接 deny 接收一个正则表达式或一个正则表达式列表 阅读全文

posted @ 2019-02-20 19:40 XingLejun 阅读(1025) 评论(0) 推荐(0)

导航