• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 众包
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
 






努力爬行的小虫子

 
 

Powered by 博客园
博客园 | 首页 | 新随笔 | 联系 | 订阅 订阅 | 管理

2021年2月20日

PYHTON爬虫之selenium(四)_处理iframe
摘要: selenium处理iframe: -如果定位的标签存在于iframe标签之中,则必须使用switch_to.frame(id) -动作链(拖动):from selenium.webdriver import ActionChains(bro) -实例化一个动作链对象: #动作链 -action=A 阅读全文
posted @ 2021-02-20 23:26 努力爬行的小虫子 阅读(281) 评论(0) 推荐(0)
 
PYHTON爬虫之selenium(三)
摘要: 基于浏览器自动化的操作代码 -发起请求:get(url) -标签定位:find系列的方法 -标签交互:send_keys(‘xxx’) -执行js程序:excute_script(‘jsCode’) -前进,后退:back() , forward() -关闭浏览器:quit() 实例二:淘宝网:ht 阅读全文
posted @ 2021-02-20 23:23 努力爬行的小虫子 阅读(98) 评论(0) 推荐(0)
 
PYHTON爬虫之selenium(二)
摘要: -selenium使用流程 -环境安装:pip install selenium -下载一个浏览器的驱动程序 -下载路径:http://chromedriver.storage.googleapis.com/index.html -驱动程序和浏览器的映射关系:http://blog.csdn.net 阅读全文
posted @ 2021-02-20 22:39 努力爬行的小虫子 阅读(92) 评论(0) 推荐(0)
 
PYHTON爬虫之selenium(一)
摘要: selenium启动chrome时,弹出设置页面:Windows Defender 防病毒要重置您的设置。和data页面 转载自:https://blog.csdn.net/xm_csdn/article/details/84820412 1.在使用selenium打开chrome时同时打开了两个标 阅读全文
posted @ 2021-02-20 21:23 努力爬行的小虫子 阅读(88) 评论(0) 推荐(0)
 
PYTHON_异步爬虫(三)之协程(二)
摘要: 一、 首先创建三个服务器,代码如下: flask服务器.py 1 from flask import Flask 2 import time 3 4 app = Flask(__name__) 5 6 @app.route('/bobo') 7 def index_bobo(): 8 time.sl 阅读全文
posted @ 2021-02-20 14:23 努力爬行的小虫子 阅读(131) 评论(0) 推荐(0)
 
PYTHON_异步爬虫(三)之协程(一)
摘要: 一、异步协程的基本使用 -event_loop:事件,相当于一个无线循环,我们可以把一些函数注册到这个事件循环上,当满足某些条件的时候,函数就会被循环执行。 -coroutine:协程对象,我们可以将协程对象注册到事件循环中,它会被事件循环调用。 我们可以使用 async 关键字来定义一个方法,这个 阅读全文
posted @ 2021-02-20 13:15 努力爬行的小虫子 阅读(324) 评论(0) 推荐(0)