2020年7月17日
（19）爬虫 selenium
摘要： from selenium import webdriver d=webdriver.Edge() d.get('https://www.baidu.com/') 阅读全文
posted @ 2020-07-17 21:15 kuanleung 阅读(8) 评论(0) 推荐(0)
(18)爬虫xpath实战
摘要： import requests from lxml import etree from fake_useragent import UserAgent url = 'https://tech.163.com/20/0716/07/FHL0LPK300097U7T.html' headers={ 'U 阅读全文
posted @ 2020-07-17 12:49 kuanleung 阅读(14) 评论(0) 推荐(0)
2020年7月16日
(6)单片机独立按键
摘要： #include <reg52.h> typedef unsigned char u8; typedef unsigned int u16; sbit key=P2^2; sbit led=P3^2; void delay(u16 i) { while(i--); } void keypr() { 阅读全文
posted @ 2020-07-16 15:14 kuanleung 阅读(7) 评论(0) 推荐(0)
爬虫Scrapy之一（17）
摘要： 1. Scrapy 框架介绍 Scrapy是Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy = Scrach+Python Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试、信息处理和历史档案等大量应用范围内抽取结构化 阅读全文
posted @ 2020-07-16 11:08 kuanleung 阅读(13) 评论(0) 推荐(0)
爬虫Tesseract（16）
摘要： 1. Tesseract介绍 tesseract 是一个google支持的开源ocr项目 其项目地址：https://github.com/tesseract-ocr/tesseract 目前最新的源码可以在这里下载 2. Tesseract安装包下载 Tesseract的release版本下载地址 阅读全文
posted @ 2020-07-16 11:06 kuanleung 阅读(27) 评论(0) 推荐(0)
爬虫——Selenium 处理滚动条（15）
摘要： Selenium 处理滚动条 selenium并不是万能的，有时候页面上操作无法实现的，这时候就需要借助JS来完成了 当页面上的元素超过一屏后，想操作屏幕下方的元素，是不能直接定位到，会报元素不可见的。这时候需要借助滚动条来拖动屏幕，使被操作的元素显示在当前的屏幕上。滚动条是无法直接用定位工具来定位 阅读全文
posted @ 2020-07-16 11:05 kuanleung 阅读(42) 评论(0) 推荐(0)
爬虫Selenium（14）
摘要： 1. Selenium Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，类型像我们玩游戏用的按键精灵，可以按指定的命令自动操作，不同是Selenium 可以直接运行在浏览器上，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器）。 Selenium 可以根 阅读全文
posted @ 2020-07-16 11:04 kuanleung 阅读(10) 评论(0) 推荐(0)
(17)爬虫—多线程
摘要： from threading import Thread from queue import Queue from fake_useragent import UserAgent import requests from lxml import etree # 爬虫类 class CrawlInfo 阅读全文
posted @ 2020-07-16 11:01 kuanleung 阅读(8) 评论(0) 推荐(0)
2020年7月15日
(16)爬虫jsonpath
摘要： from jsonpath import jsonpath import requests url='' headers={ 'User-Agent':'Mozilla/5.0(Windows;U;WindowsNT6.1;en-us)AppleWebKit/534.50(KHTML,likeGec 阅读全文
posted @ 2020-07-15 16:45 kuanleung 阅读(10) 评论(0) 推荐(0)
(15)爬虫pyquery
摘要： from pyquery import PyQuery as pq import requests url='https://ip.jiangxianli.com/?page=1' headers={ 'User-Agent':'Mozilla/5.0(Windows;U;WindowsNT6.1; 阅读全文
posted @ 2020-07-15 12:14 kuanleung 阅读(11) 评论(0) 推荐(0)