2020年4月23日
爬取微博热搜
摘要： 一、主题式网络爬虫设计方案 1.主题式网络爬虫名称：微博热搜 2.爬取内容：爬取热搜名称、热度和排名 3.爬虫设计方案概述：先查找源代码，找到关键内容的索引标签，进行分析，提取需要的数据。然后对数据进行清洗和处理，以及可视化处理 4.难点：回归方程不熟练，知识点掌握不全。 二、主题页面的结构特征分析 阅读全文
posted @ 2020-04-23 18:32 朝日奈 阅读(590) 评论(0) 推荐(0) 编辑
2020年3月19日
爬取知乎热榜
摘要： 1.打开网页https://tophub.today/n/mproPpoq6O 2.按Ctrl+U 打开网页源代码 3.寻找爬取内容 4. import requests import pandas as pd from bs4 import BeautifulSoup import pandas 阅读全文
posted @ 2020-03-19 19:05 朝日奈 阅读(998) 评论(0) 推荐(0) 编辑