scrapy 的post请求

 

 


# 发起post请求:
# 1,将Request方法中的method参数赋值成post
# yield scrapy.Request(url=url, callback=self.parse, method='post')
# 2,FormRequest()可以发起post请求(推荐)

 

 

# -*- coding: utf-8 -*-
import scrapy

# 要求:百度翻译中指定词条对应的翻译结果进行获取
class PostdemoSpider(scrapy.Spider):
    name = 'postDemo'
    start_urls = ["https://fanyi.baidu.com/sug"]
    # start_request该方法是父类中的一个方法:该方法可以对start_urls列表中的元素进行get请求的发送,
    # 发起post请求:
    #     1,将Request方法中的method参数赋值成post
            # yield scrapy.Request(url=url, callback=self.parse, method='post')
    #     2,FormRequest()可以发起post请求(推荐)
    def start_requests(self):
        print('是打发')
        # post请求的参数
        data = {
            'kw': '你好',
            }
        for url in self.start_urls:
            # 不指定method='post',Request默认是get方法
            # yield scrapy.Request(url=url,callback=self.parse,method='post') # 方式一
            yield scrapy.FormRequest(url=url,formdata=data, callback=self.parse)

    def parse(self,response):
        print('你真漂亮啊',response.text,'你真漂亮啊')
View Code

 

posted @ 2020-02-03 20:48  ty1539  阅读(226)  评论(0编辑  收藏  举报