摘要:
场景:目标抓取1万条数据 执行过程如下: 请求url 得到相应 从相应中提取内容 存到本地 按照逻辑是线性过程,效率太低 可采用异步操作,可考虑3种方式:多线程,多进程,协程 1.快速学会多线程 2.快速学会多进程 3.线程池和进程池 4.拔光新发地 5.协程 6.多任务异步协程实现 7.aioht
阅读全文
posted @ 2022-04-09 10:11
connie_tong
阅读(84)
推荐(0)
摘要:
import requests import re url = 'https://ad-api.uogroup.com/bin/v1/getAdContent' doumain = 'https://www.dytt89.com/' agent = { 'user-agent': 'Mozilla/
阅读全文
posted @ 2022-04-07 23:24
connie_tong
阅读(155)
推荐(0)
摘要:
from selenium import webdriver import unittest from HwTestReport import HTMLTestReport from HwTestReport import HTMLTestReportEN import time from PIL
阅读全文
posted @ 2022-03-17 14:30
connie_tong
阅读(82)
推荐(0)
摘要:
from selenium import webdriver import time import csv from selenium.webdriver.common.action_chains import ActionChains data = csv.reader(open(".\\PROD
阅读全文
posted @ 2021-12-02 13:01
connie_tong
阅读(187)
推荐(0)
posted @ 2021-11-25 11:26
connie_tong
阅读(98)
推荐(0)
摘要:
window = driver.find_element_by_xpath('//div[@aria-labelledby="请先实名认证"]') if window.is_displayed(): driver.find_elements_by_xpath('//div[@role="dialog
阅读全文
posted @ 2021-11-18 14:30
connie_tong
阅读(681)
推荐(0)
摘要:
浏览器缩小75% driver.execute_script("document.body.style.zoom='75%'") from selenium import webdriver import time import csv data = csv.reader(open("D:\\pyt
阅读全文
posted @ 2021-11-18 13:01
connie_tong
阅读(315)
推荐(0)
摘要:
# 获取订单编号order = driver.find_elements_by_xpath('//div[@class="goods-list"]/div')[1]order_num = order.textprint(order_num)# 提取订单编号number = re.split('订单编
阅读全文
posted @ 2021-11-12 12:14
connie_tong
阅读(206)
推荐(0)
摘要:
创建py文件 编写一个py文件,内容如下: from selenium import webdriver import time from PIL import Image from aip import AipOcr # 识别验证码 def get_valiCode(): app_id = str
阅读全文
posted @ 2021-05-22 16:04
connie_tong
阅读(251)
推荐(0)
摘要:
报错 pyinstaller报错 with open(src, 'rb') as fsrc, open(dst, 'wb') as fdst: 权限没有 解决方法: 关闭360杀毒软件
阅读全文
posted @ 2021-03-25 16:13
connie_tong
阅读(504)
推荐(0)