CJTARRR - 博客园

2021年9月30日

摘要： # 查看最近30分钟的日志docker logs --since 30m CONTAINER_ID# 查看某时间之后的日志docker logs -t --since="2021-09-08T00:00:00" CONTAINER_ID# 查看某时间段的日志docker logs -t --si 阅读全文

posted @ 2021-09-30 15:14 CJTARRR 阅读(121) 评论(0) 推荐(0)

Python 时间戳和格式化时间的相互转换

摘要：展示： import timeimport datetime# 1、将时间戳转换为格式化时间timestamp = 1381419600timearray = time.localtime(timestamp)stru_time = time.strftime("%Y-%m-%d %H:%M:%S 阅读全文

posted @ 2021-09-30 15:01 CJTARRR 阅读(55) 评论(0) 推荐(0)

adb查看app包名和activity的方法

摘要： 1、手机USB连接电脑，打开adb调试 2、打开要看包名的app 3、windows中cmd执行命令 adb shell dumpsys window w | findstr \/ | findstr name= 或者 adb shell dumpsys window |findstr mCurre 阅读全文

posted @ 2021-09-30 14:51 CJTARRR 阅读(374) 评论(0) 推荐(0)

2021年9月3日

win10 x64安装openssl安装charles证书到安卓手机

摘要： https://www.jianshu.com/p/c8adc6491020 ——简书笔记 # 其他证书也是一样的操作。阅读全文

posted @ 2021-09-03 21:29 CJTARRR 阅读(76) 评论(0) 推荐(0)

2021年8月18日

mitmproxy抓app包

摘要：一、环境准备 1、python3以上二、步骤 1、使用pip安装 pip3 install mitmproxy 2、启动 mitmweb web页面在127.0.0.1：8081 3、启动后监听端口8080，手机设置代理，然后访问mitm.it安装ca证书可以抓取https 阅读全文

posted @ 2021-08-18 10:29 CJTARRR 阅读(88) 评论(0) 推荐(0)

2021年8月10日

利用cv2识别滑块验证缺口位置

摘要： # pip install opencv-python 先安装cv2库# 读取背景图片和缺口图片bg_img = cv2.imread('bg.jpg') # 背景图片tp_img = cv2.imread('tp.png') # 缺口图片# 识别图片边缘bg_edge = cv2.Canny(bg 阅读全文

posted @ 2021-08-10 22:41 CJTARRR 阅读(1047) 评论(0) 推荐(0)

pyppeteer定位节点并获得节点的属性值

摘要： # 先获取标签,这里得到的是列表elements = await page.Jx('xpath')# 方法一：for item in elements: src = await (await item.getProperty('src')).jsonValue()# 方法二：for item in 阅读全文

posted @ 2021-08-10 22:38 CJTARRR 阅读(894) 评论(0) 推荐(0)

pyppeteer拦截器使用

摘要： # 设置request拦截器await page.setRequestInterception(True)page.on('request',lambda req: asyncio.ensure_future(intercept_request(req)))# 设置response拦截器page.o 阅读全文

posted @ 2021-08-10 22:37 CJTARRR 阅读(2290) 评论(0) 推荐(0)

pyppeteer获取iframe

摘要： frame = page.frames # 得到page中所有iframe对象的列表iframe = frame[0]# 如果iframe内还有iframe，则使用childFrames取出子iframe列表childiframes = iframe.childFrames# iframe对象可以定阅读全文

posted @ 2021-08-10 22:36 CJTARRR 阅读(1335) 评论(0) 推荐(0)

python获取屏幕大小

摘要： import tkintertk = tkinter.Tk()width = tk.winfo_screenwidth()height = tk.winfo_screenheight()tk.quit() 阅读全文

posted @ 2021-08-10 22:35 CJTARRR 阅读(2846) 评论(0) 推荐(0)

伪装pyppeteer

摘要： from pyppeteer import launcherlauncher.DEFAULT_ARGS.remove("--enable-automation")from pyppeteer_stealth import stealthfrom pyppeteer import launch# p 阅读全文

posted @ 2021-08-10 22:34 CJTARRR 阅读(231) 评论(0) 推荐(0)

2021年7月29日

selenium获取伪类元素

摘要： 1、先定位到伪类元素节点利用xpath、css_selector都可以，只要定位到元素所在的节点就行 2、执行js代码获取content content = bro.execute_script("return window.getComputedStyle(arguments[0], '::be 阅读全文

posted @ 2021-07-29 17:51 CJTARRR 阅读(490) 评论(0) 推荐(0)

2021年7月24日

selenium控制鼠标悬停和滑动滑块操作

摘要： from selenium import webdriverfrom selenium.webdriver import ActionChainsbro = webdriver.Chrome()# 生成action对象action = ActionChains(bro)# 找到要操作的元素eleme 阅读全文

posted @ 2021-07-24 16:13 CJTARRR 阅读(268) 评论(0) 推荐(0)

2021年7月23日

scrapy常用设置

摘要： 1、禁止重定向 REDIRECT_ENABLED = False 2、禁用cookies COOKIE_ENABLED = False 3、禁用referer REFERER_ENABLED = False 阅读全文

posted @ 2021-07-23 19:44 CJTARRR 阅读(112) 评论(0) 推荐(0)

scrapy发送payload数据的post请求

摘要： import json# 需要设置headers和准备payload数据# 构建payload_headerspayload_headers = {}payload_headers['origin'] = 'https://xxxx.com'payload_headers[ 'user-agent 阅读全文

posted @ 2021-07-23 19:02 CJTARRR 阅读(152) 评论(0) 推荐(0)

Scrapy 重写dupefilter以解决scrapy-redis和scrapy-splash冲突问题

摘要： from __future__ import absolute_importfrom copy import deepcopyfrom scrapy.utils.request import request_fingerprintfrom scrapy.utils.url import cano 阅读全文

posted @ 2021-07-23 18:56 CJTARRR 阅读(307) 评论(0) 推荐(0)

爬虫部署：scrapyd+gerapy

摘要： 1、安装scrapyd 服务端安装：pip install scrapyd 客户端安装:pip install scrapyd-client 2、启动scrapyd服务服务端建立一个deploy文件夹，cd到该文件夹中，执行sudo scrapyd或scrapyd。这时在服务端主机的6800端口打阅读全文

posted @ 2021-07-23 18:47 CJTARRR 阅读(112) 评论(0) 推荐(0)

通过selenium获得cookies(字典)

摘要： from selenium import webdriverbro = webdriver.Chrome()bro.get('https://www.baidu.com')# 这里获得的是包含cookie信息的字典们组成的列表cookies_dic_list = bro.get_cookies() 阅读全文

posted @ 2021-07-23 18:21 CJTARRR 阅读(180) 评论(0) 推荐(0)

2021年7月13日

利用airtest爬取app内容

摘要： 1、下载安装airtest airtest官网：https://airtest.netease.com/home/ 进入官网就可以看到下载按钮。下载完成后是一个压缩包，解压之后找到应用程序打开就可以开始使用。 2、下载安装手机模拟器（推荐雷电模拟器）这里的模拟器是当作手机使用，当然你可以通过连接阅读全文

posted @ 2021-07-13 23:16 CJTARRR 阅读(1034) 评论(0) 推荐(0)

Python 判断代理ip是否可用

摘要： from concurrent.futures import ThreadPoolExecutor, as_completedimport socket # 判断ip_port是否能够连接上def try_connection(ip_port): s = socket.socket() # 等待最大阅读全文

posted @ 2021-07-13 13:38 CJTARRR 阅读(335) 评论(0) 推荐(0)

公告