摘要: 模拟器配置 问题 系统无法抓包 解决方案 配置代理 系统说明: 手机抓包https数据,需要安装证书 android 7.0以下系统 默认是可以正常抓包 运行起来都是比较卡 目前网络找不好找 android 7.0以上系统 默认是不可以正常抓包,需要做额外的配置 运行起来流畅 目前网络比较好找 配置 阅读全文
posted @ 2023-07-06 23:51 jiang_jiayun 阅读(88) 评论(0) 推荐(0)
摘要: 既然要爬取移动端爬虫,就需要移动端,我们可以采用真实手机也可以使用虚拟手机,在这我们使用虚拟手机。 网上有许多虚拟手机软件:夜神模拟器、雷电模拟器、网易MuMu模拟器、逍遥模拟器等等...可以选择的任意一种。 我们选择夜神模拟器演示 下载 夜神安卓模拟器-官网 https://www.yeshen. 阅读全文
posted @ 2023-07-06 23:28 jiang_jiayun 阅读(34) 评论(0) 推荐(0)
摘要: 移动端爬虫介绍 爬虫除了 Web 网页,也可以抓取 App 的数据。 为什么要学习移动APP的爬虫? 公司需求 随机互联网的发展,数据不仅仅只是存在于PC端。移动端的数据在这几年的占比以及势头发展趋势呈现几何倍数的增长。对于做数据分析、用户画像、市场调研来说仅仅参考PC端的数据是远远不够的。 有时w 阅读全文
posted @ 2023-07-06 22:35 jiang_jiayun 阅读(156) 评论(0) 推荐(0)
摘要: 超级鹰识别验证码 http://www.chaojiying.com/ 思路: 获取图片内容 提交给打码平台 获取验证码 提交并验证数据 提示 只要平台支持,基本都可以使用。比如,识别英文, 数字,汉字,做题等 from chaojiying_Python.chaojiying import Cha 阅读全文
posted @ 2023-07-06 20:39 jiang_jiayun 阅读(199) 评论(0) 推荐(0)
摘要: 验证码-手动输入 思路: 获取验证码 输入验证码 提交并验证数据 提示 可以输入任意非行为验证码,比如:识别英文,数字,汉字,做题等 from email import header import requests from fake_useragent import UserAgent # 获取一 阅读全文
posted @ 2023-07-06 20:14 jiang_jiayun 阅读(366) 评论(0) 推荐(0)
摘要: 图片验证码介绍 介绍 验证码(CAPTCHA)是“Completely Automated Public Turing test to tell Computers and Humans Apart”(全自动区分计算机和人类的图灵测试)的缩写。也就是说,这个东西最开始设计的目的,就是为了区分请求来自 阅读全文
posted @ 2023-07-06 19:42 jiang_jiayun 阅读(183) 评论(0) 推荐(0)