林禹铭-第二次作业
这个作业属于哪个课程 | 至诚软工实践F班 |
---|---|
这个作业要求在哪里 | https://github.com/lym-one/212106725 |
这个作业的目标 | 使用fiddler进行对朴朴商品价格的实时监控 |
学号 | 212106725 |
解题思路描述
首先我看到题目时,发现又是我未曾接触过的抓包工具,我就去网上进行搜索, 在安装完成之后打开它的那一瞬间,它就已经设置好了浏览器的代理了。当你关闭的时候, 它还能进行帮你代理还原。我就尝试用Fiddler与编写python代码来进行朴朴超市抓包。
具体进程
1.查看了同学在群里所推送的教学视频进行学习,并结合之前大专尚浅学习到的python知识进行结合,和舍友的帮助下才得以完成此次作业。
2.首先,我下载了老师给的Fiddler软件,然后下载了pyCharm,一个属于python的代码解析器,打开在pycharm控制台下载了request工具
3.使用fiddler进行抓取到朴朴商店的商品地址,复制到火狐浏览器进行打开
4.将爬取到的url在浏览器中进行打开,可以发现商品地址里所对应的json、原始数据和头部,可以在头部中找到对应的User-Agent,将其留在代码中进行后序的商品资料爬取
5.以下是我所编写的爬取代码及其运行截图