摘要: 昨天把抓取虎牙直播的第一页爬取出来了 今天做了爬所有的网页都抓取出来封装存入mysql里面 完整代码 封装和写入数据库都没有大问题 创建数据库 存入数据库的时候,存入到第三页的时候报错在百度搜索了一下 说是格式错误叫改成 utf8mb4 上面的错误需要把代码改成 utf8mb4 阅读全文
posted @ 2020-12-15 13:46 小小拐 阅读(88) 评论(1) 推荐(0)
摘要: python爬取虎牙主播名内容动态翻页 通过抓包找到network分析找到每一页的动态请求 接下来都可以就可以写代码了 这个是刚刚分析的动态网站https://www.huya.com/cache.php?m=LiveList&do=getLiveListByPage&tagAll=0&page=1 阅读全文
posted @ 2020-12-15 13:41 小小拐 阅读(164) 评论(1) 推荐(0)