摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流(王道论坛已经在显眼的地方声明课程严禁任何形式的录制、传播和分享,所以下载自己观看就是了,不要用于盈利用途) 目标 在PC端播放和下载王道论坛H5应用的视频 本篇文章的主要目的是为了分享PC端播放以及下载王道计算机考研课程的方法,用于大家通过PC端进行学
阅读全文
摘要:运行环境 python 3.7.4 目标 解析Bilibili弹幕 不知道从什么时候开始,哔哩哔哩的弹幕就变成ProtoBuf的格式了,如果对这个格式不了解,就会觉得爬下来的是一堆乱码,难以处理。 由于最近期末论文是个爬虫,所以就整理了一下解析的方法,发出来分享。 主要之前查找资料时,没有看到过py
阅读全文
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 这次想分享一下关于学校教务,教学平台,以及学校公众号上面的web应用如何模拟登录。为了学校服务器的安全,本篇随笔不会曝光太多关于本校的信息,也不公布具体的代码,有意愿交流技术的可以继续
阅读全文
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 numpy 1.17.2 opencv-python 4.2.0.34 爬取目标 模拟登录雨课堂 雨课堂目前的登录流程 这次想跟大家分享一下websocket协议的爬虫怎么做。我们以雨
阅读全文
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 Tampermonkey 4.3.6 ECMAScript5(虽然选择了5,但是还是用了ES6的语法) 爬取目标 每个学堂在线的视频和导学资源下载 效果呈现 视频界面的下载按钮可以下载高清或标清的视频 导学界面的下载按钮可以下载导学的mark
阅读全文
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 爬取目标 EDA技术与应用(2020秋)1.1.2 EDA技术概述 教学视频 分析视频字幕接口 找接口就只能凭借经验去network里面翻找,或者借助于浏览器调试,没有过多的技巧。 一
阅读全文