2020年7月14日
(14)爬虫xpath使用
摘要： from lxml import etree import requests url = 'https://www.qidian.com/all' headers={ 'User-Agent':'Mozilla/5.0(Windows;U;WindowsNT6.1;en-us)AppleWebKit 阅读全文
posted @ 2020-07-14 21:53 kuanleung 阅读(7) 评论(0) 推荐(0)
(13)爬虫re
摘要： import re str = 'I Study python3.7 everyday' print('--'*50) m1 = re.match(r'.',str) print(m1.group()) #m2=re.search(r'S\w+',str) #print(m2.group()) m3 阅读全文
posted @ 2020-07-14 18:25 kuanleung 阅读(4) 评论(0) 推荐(0)
（12）爬虫beautifulsoup使用
摘要： from bs4 import BeautifulSoup str = ''' <title>尚学堂</title> <div class='info' float='left'>Welcome to SXT</div> <div class='info' float='right'> <span> 阅读全文
posted @ 2020-07-14 18:21 kuanleung 阅读(8) 评论(0) 推荐(0)
2020年7月10日
（5）单片机动态数码管
摘要： #include <reg52.h> typedef unsigned char u8; typedef unsigned int u16; sbit LSA=P2^2; sbit LSB=P2^3; sbit LSC=P2^4; unsigned char smgduan [16]={0x3f,0 阅读全文
posted @ 2020-07-10 19:57 kuanleung 阅读(20) 评论(0) 推荐(0)
（4）单片机静态数码管
摘要： #include <reg52.h> typedef unsigned char u8; typedef unsigned int u16; unsigned char smg [11]={0xc0,0xf9,0xa4,0xb0,0x99,0x92,0x82,0xf8,0x80,0x90,0x88} 阅读全文
posted @ 2020-07-10 14:17 kuanleung 阅读(7) 评论(0) 推荐(0)
2020年7月9日
爬虫多线程（13）
摘要： 1. 引入 我们之前写的爬虫都是单个线程的？这怎么够？一旦一个地方卡到不动了，那不就永远等待下去了？为此我们可以使用多线程或者多进程来处理。 不建议你用这个，不过还是介绍下了，如果想看可以看看下面，不想浪费时间直接看 2. 如何使用 爬虫使用多线程来处理网络请求，使用线程来处理URL队列中的url， 阅读全文
posted @ 2020-07-09 20:37 kuanleung 阅读(6) 评论(0) 推荐(0)
爬虫pyquery（12）
摘要： 1. pyquery 1.1 介绍 如果你对CSS选择器与Jquery有有所了解，那么还有个解析库可以适合你–Jquery 官网https://pythonhosted.org/pyquery/ 1.2 安装 pip install pyquery 1.3 使用方式 1.3.1 初始化方式 字符串 阅读全文
posted @ 2020-07-09 20:35 kuanleung 阅读(11) 评论(0) 推荐(0)
爬虫JSON（11）
摘要： 1. JSON与JsonPATH JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式，它使得人们很容易的进行阅读和编写。同时也方便了机器进行解析和生成。适用于进行数据交互的场景，比如网站前台与后台之间的数据交互。 JSON和XML的比较可谓不相上下。 Pyt 阅读全文
posted @ 2020-07-09 20:34 kuanleung 阅读(16) 评论(0) 推荐(0)
爬虫 XPath（10）
摘要： 1. 介绍 之前 BeautifulSoup 的用法，这个已经是非常强大的库了，不过还有一些比较流行的解析库，例如 lxml，使用的是 Xpath 语法，同样是效率比较高的解析方法。如果大家对 BeautifulSoup 使用不太习惯的话，可以尝试下 Xpath 官网 http://lxml.de/ 阅读全文
posted @ 2020-07-09 20:33 kuanleung 阅读(11) 评论(0) 推荐(0)
爬虫Beautiful Soup（9）
摘要： 1. Beautiful Soup的简介 Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出一个完整的应用程序。 Beautiful Soup自动将输入文档 阅读全文
posted @ 2020-07-09 17:11 kuanleung 阅读(8) 评论(0) 推荐(0)