摘要：selenium获取cookies并持久化登陆 需求背景： ​ 这几天需要写一个接口，用来批量上传数据，最开始考虑的是 UI 自动化，然后选值的时候自动化难以判别，最终选择 接口 自动化。 ​ 然后操蛋的找了两天没找着该环境的登录接口，只能选择最笨的办法，selenium 模拟登陆，获取到cooki 阅读全文

摘要：最近在复习resqusts 爬虫模块，就重新写了一个豆瓣爬虫，这个网页从HTML 源码上来看是没有任何我想要的信息的，如下图所示： 这是网页视图，我在源码中查找影片信息，没有任何信息，如图： 由此我判断数据是通过js封装过的，于是开始抓包，包也不多，排除一下就能找到json的接口，从接口进去是这样的 阅读全文

摘要：最近在复习resqusts 爬虫模块，就重新写了一个豆瓣爬虫，这个网页从HTML 源码上来看是没有任何我想要的信息的，如下图所示： 这是网页视图，我在源码中查找影片信息，没有任何信息，如图： 由此我判断数据是通过js封装过的，于是开始抓包，包也不多，排除一下就能找到json的接口，从接口进去是这样的 阅读全文