摘要: -- r.status_code #响应状态码 -- r.content #字节方式的响应体,会自动为你解码 gzip 和 deflate 压缩 -- r.headers #以字典对象存储服务器响应头,但是这个字典比较特殊,字典键不区分大小写,若键不存在则返回None -- r.json() #Re 阅读全文
posted @ 2020-03-14 21:00 小贝书屋 阅读(1001) 评论(0) 推荐(0)
摘要: 关键词:爬虫、python、request、接口、excel处理、正则 思路: 1、首先准备好excel文档,把股票代码事先编辑进去。 2、脚本读取文档,依次读出股票代码到指定站点发起请求获取股票信息 3、将获取的股票信息简单处理,依次写入到指定的文档单元格中,完成整个实例过程 用到的python库 阅读全文
posted @ 2020-02-01 21:42 小贝书屋 阅读(5306) 评论(4) 推荐(0)
摘要: 首先,这个库只支持xlsx格式的excel文件 预期,对”excel_test.xlsx“的A1单元格写入”hello word“ 1、安装”openpyxl“库,pip install openpyxl 2、导入openpyxl库 import openpyxl 3、读取excel文件 xfile 阅读全文
posted @ 2020-02-01 20:38 小贝书屋 阅读(8570) 评论(0) 推荐(0)
摘要: 比如,我们需要实现百度某一只股票,查询出股票的当前价格和市值 我们查询”600754“这只股票的当前价格和市值 实现步骤如下: 1、导入request库,还需要额外导入lxml库(后面使用的到) import requests #倒入requests库 from lxml import etree 阅读全文
posted @ 2020-02-01 20:09 小贝书屋 阅读(3060) 评论(0) 推荐(0)
摘要: 上图请求头内容,内容多不说,也不确认哪些数据是必须的,网上找到一个懒办法 快速一键生成 Python 爬虫请求头 实战演练 抓取网站:https://developer.mozilla.org... 网站在线转换 1,Chrome 打开开发者选项( f12 ) > network 选项卡 > 刷新页 阅读全文
posted @ 2020-01-30 16:14 小贝书屋 阅读(2536) 评论(0) 推荐(0)
摘要: 利用selenium自动化统计微博阅读数 查看微博阅读数的元素路径 微博列表中第一条微博的元素路径“//*[@id="Pl_Official_MyProfileFeed__20"]/div/div[2]/div[2]/div/ul/li[1]/a/span/span/i” 当前页最后一条微博的元素路 阅读全文
posted @ 2019-11-25 14:05 小贝书屋 阅读(844) 评论(0) 推荐(0)
摘要: 比如,我需要获取每一条微博的阅读数,总不可能所有微博都找出xpath,然后获取阅读数 找规律 “//*[@id='Pl_Official_MyProfileFeed__20']/div/div[2]/div[2]/div/ul/li[1]/a/span/span/i” 第二个div的数字,代表当前页 阅读全文
posted @ 2019-11-24 20:56 小贝书屋 阅读(1647) 评论(1) 推荐(1)
摘要: 引入 from selenium import webdriver from selenium.webdriver.common.action_chains import ActionChains from selenium.webdriver.common.keys import Keys fro 阅读全文
posted @ 2019-11-17 21:49 小贝书屋 阅读(787) 评论(0) 推荐(0)
摘要: 1、定位weibo登录框 输入框的元素信息如下 css的写法(可以看到name属性的属性值是“username”,class属性的值“W_input" driver.findElement(By.cssSelector(“input[name='username'][class='W_input ' 阅读全文
posted @ 2019-11-17 21:01 小贝书屋 阅读(499) 评论(0) 推荐(0)
摘要: 学习 selenium-webdriver 已经一段时间了,最近学习到,测试用例的批量执行,和测试套件的使用,有点自己的理解,不晓得对不对,希望大家指正! 写一个测试用例 baidu.py class Baidu(unittest.TestCase): def setUp(self): self.d 阅读全文
posted @ 2019-11-17 20:12 小贝书屋 阅读(444) 评论(0) 推荐(0)