自媒体爬虫工具 收集

推荐 GitHub 上最近连续霸榜的一个自媒体爬虫工具 MediaCrawler。

目前已支持小红书、抖音、快手、B 站、微博等自媒体平台的视频、图片、评论、点赞、转发信息抓取。

实现了多种登录方式、指定数据爬取、IP 代理池以及多种格式数据保存等功能。

GitHub:github.com/NanmiCoder/MediaCrawler

该工具目前是通过命令行方式部署安装使用,因此需要一些 Python 技术基础知识。

posted @ 2024-04-09 10:16  myrj  阅读(24)  评论(0编辑  收藏  举报