轩_雨

青山不厌三杯酒,长日惟消一局棋

随笔分类 -  爬虫

王道论坛_PC端播放和下载视频
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流(王道论坛已经在显眼的地方声明课程严禁任何形式的录制、传播和分享,所以下载自己观看就是了,不要用于盈利用途) 目标 在PC端播放和下载王道论坛H5应用的视频 本篇文章的主要目的是为了分享PC端播放以及下载王道计算机考研课程的方法,用于大家通过PC端进行学 阅读全文

posted @ 2021-06-13 17:18 轩_雨 阅读(2753) 评论(0) 推荐(0)

Bilibili_解析ProtoBuf格式的弹幕
摘要:运行环境 python 3.7.4 目标 解析Bilibili弹幕 不知道从什么时候开始,哔哩哔哩的弹幕就变成ProtoBuf的格式了,如果对这个格式不了解,就会觉得爬下来的是一堆乱码,难以处理。 由于最近期末论文是个爬虫,所以就整理了一下解析的方法,发出来分享。 主要之前查找资料时,没有看到过py 阅读全文

posted @ 2020-11-11 13:17 轩_雨 阅读(2301) 评论(0) 推荐(0)

学校平台的模拟登录和相关操作
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 这次想分享一下关于学校教务,教学平台,以及学校公众号上面的web应用如何模拟登录。为了学校服务器的安全,本篇随笔不会曝光太多关于本校的信息,也不公布具体的代码,有意愿交流技术的可以继续 阅读全文

posted @ 2020-10-24 23:02 轩_雨 阅读(676) 评论(2) 推荐(0)

雨课堂模拟登录_获取websocket数据
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 numpy 1.17.2 opencv-python 4.2.0.34 爬取目标 模拟登录雨课堂 雨课堂目前的登录流程 这次想跟大家分享一下websocket协议的爬虫怎么做。我们以雨 阅读全文

posted @ 2020-10-11 13:31 轩_雨 阅读(1801) 评论(6) 推荐(0)

学堂在线视频字幕抓取2_油猴脚本编写
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 Tampermonkey 4.3.6 ECMAScript5(虽然选择了5,但是还是用了ES6的语法) 爬取目标 每个学堂在线的视频和导学资源下载 效果呈现 视频界面的下载按钮可以下载高清或标清的视频 导学界面的下载按钮可以下载导学的mark 阅读全文

posted @ 2020-09-27 14:55 轩_雨 阅读(1509) 评论(2) 推荐(0)

学堂在线视频字幕抓取1_分析数据接口
摘要:写在最前:互联网并非法外之地,爬虫仅供技术交流 运行环境 python 3.7.4 requests 2.10.0 爬取目标 EDA技术与应用(2020秋)1.1.2 EDA技术概述 教学视频 分析视频字幕接口 找接口就只能凭借经验去network里面翻找,或者借助于浏览器调试,没有过多的技巧。 一 阅读全文

posted @ 2020-09-25 17:46 轩_雨 阅读(1374) 评论(0) 推荐(0)