Zaccheooo

2019年7月4日

摘要： '''''' ''' 爬取豌豆荚app数据 - 请求url page2: https://www.wandoujia.com/wdjweb/api/category/more?catId=6001&subCatId=0&page=2&ctoken=vbw9lj1sRQsRddx0hD-XqCNF ''' import requests from bs4 import BeautifulSoup... 阅读全文

posted @ 2019-07-04 09:33 Zaccheooo 阅读(155) 评论(0) 推荐(0)

2019年7月3日

day03 bs4之搜索文档树

摘要： '''''' ''' find: 找第一个 find_all: 找所有标签查找与属性查找: name 属性匹配 name 标签名 attrs 属性查找匹配 text 文本匹配标签: - 字符串过滤器字符串全局匹配 - 正则过滤器 ... 阅读全文

posted @ 2019-07-03 19:38 Zaccheooo 阅读(134) 评论(0) 推荐(0)

day03 bs4解析库之遍历文档树

摘要： html_doc = """ The Dormouse's story $37 Once upon a time there were three little sisters; and their names were Elsie, Lacie and Tillie; and they lived at the bottom of a well. ... """ from bs4 impo... 阅读全文

posted @ 2019-07-03 19:37 Zaccheooo 阅读(130) 评论(0) 推荐(0)

day03 爬取京东商品信息

摘要： ''' 初级版: form tank! ''' import time from selenium import webdriver from selenium.webdriver.common.keys import Keys driver = webdriver.Chrome() try: driver.implicitly_wait(10) #往京东发送请求 ... 阅读全文

posted @ 2019-07-03 10:48 Zaccheooo 阅读(150) 评论(0) 推荐(0)

day03 元素交互操作

摘要： from selenium import webdriver from selenium.webdriver import ActionChains from selenium.webdriver.common.keys import Keys #键盘按键操作 import time driver = webdriver.Chrome() try: driver.implicitly... 阅读全文

posted @ 2019-07-03 08:49 Zaccheooo 阅读(121) 评论(0) 推荐(0)

2019年7月2日

day02 selenium选择器

摘要： '''''' from selenium import webdriver # web驱动 from selenium.webdriver.common.keys import Keys # 键盘按键操作 import time import time driver = webdriver.Chrome() try: # 隐式等待: 需要在get之前调用 # 等待任意... 阅读全文

posted @ 2019-07-02 19:05 Zaccheooo 阅读(140) 评论(0) 推荐(0)

day02 selenium基本使用

摘要： from selenium import webdriver # web驱动 from selenium.webdriver.common.by import By # 按照什么方式查找，By.ID,By.CSS_SELECTOR from selenium.webdriver.common.keys import Keys # 键盘按键操作 from selenium.webdriver... 阅读全文

posted @ 2019-07-02 18:59 Zaccheooo 阅读(104) 评论(0) 推荐(0)

day02 爬取豆瓣电影top250

摘要： ''' 爬取豆瓣电影信息：电影排名、电影名称、电影url、电影导演电影主演、电影年份、电影类型电影评分、电影评论、电影简介 1.分析所有主页的url 第一页：https://movie.douban.com/top250?start=0&filter= 第二页：https://movie.douban.com/top250?start=25&filter= 第三页... 阅读全文

posted @ 2019-07-02 09:57 Zaccheooo 阅读(223) 评论(0) 推荐(0)

2019年7月1日

day01 post自动请求登录github

摘要： ''' POST请求自动登录github: 请求URL: https://github.com/session 请求方式: POST 请求头: Cookie User-Agent: Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (K... 阅读全文

posted @ 2019-07-01 16:50 Zaccheooo 阅读(141) 评论(0) 推荐(0)

day01 requests基本使用

摘要： # import requests ''' 爬取校花网视频：一.请求url htt://www.xiaohuar.com/v/ 二.请求方式 GET 三.请求头信息 User-Agent：用户代理 ''' import time import requests # 爬虫三部曲 # 1.发送请求 def get_pag... 阅读全文

posted @ 2019-07-01 14:48 Zaccheooo 阅读(130) 评论(0) 推荐(0)

公告