摘要: 一、主题式网络爬虫设计方案1.主题式网络爬虫名称:爬取B站热门视频排行榜2.主题式网络爬虫爬取的内容:统计所有投稿视频的数据综合得分,每日更新数据(作品,播放量,弹幕,作者) 3.主题式网络爬虫设计方案概述:找到网站地址,分析网站源代码,找到自己所需要的数据所在的位置,提取数据,进行数据整理,数据可 阅读全文
posted @ 2020-04-17 22:57 兰世杰 阅读(1611) 评论(0) 推荐(0) 编辑
摘要: import requestsfrom bs4 import BeautifulSoup as btfsheaders={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/7 阅读全文
posted @ 2020-03-21 19:07 兰世杰 阅读(704) 评论(0) 推荐(0) 编辑