摘要: '''''''''爬取豌豆荚app数据- 请求urlpage2:https://www.wandoujia.com/wdjweb/api/category/more?catId=6001&subCatId=0&page=2&ctoken=vbw9lj1sRQsRddx0hD-XqCNF''' import requests from bs4 import BeautifulSoup import... 阅读全文
posted @ 2019-07-04 09:29 文莱 阅读(94) 评论(0) 推荐(0)
摘要: from bs4 import BeautifulSoupimport requests# 请求url https://www.wandoujia.com/category/6001# 请求方式: getdef have_title(tag): if tag.name == 'span' and t 阅读全文
posted @ 2019-07-03 21:26 文莱 阅读(196) 评论(0) 推荐(0)
摘要: #方式二一点点移动 #bool过滤器 阅读全文
posted @ 2019-07-03 18:23 文莱 阅读(159) 评论(0) 推荐(0)
摘要: '''''一 requests爬取豆瓣- 请求urlhttps://movie.douban.com/top250- 请求方式GET- 请求头user-agentcookies爬取电影信息 电影名称 电影url 导演 主演 电影年份 电影类型 电影评分 评论人数 简介1 分析所有主页url第一页https://movie.douban.com... 阅读全文
posted @ 2019-07-02 12:37 文莱 阅读(154) 评论(0) 推荐(0)
摘要: # requests请求库# 1.安装与使用# pip3 install requests# 2.模拟浏览器# General:# Request URL:请求URL# Requst Method:请求方式# Status Code:响应状态码# Response Headers:提交到服务器的数据头# ... 阅读全文
posted @ 2019-07-01 17:53 文莱 阅读(109) 评论(0) 推荐(0)