2020年4月23日
爬取百度热搜和数据处理
摘要： 一、主题式网络爬虫设计方案 1.主题式网络爬虫名称：爬取百度热榜与数据处理 2.爬取内容：百度前十，搜索指数 3.难点：如何爬取和函数的应用 二、主题页面的结构特征分析 分析网页 得到url为http://top.baidu.com/buzz?b=341&fr=topindex 3.节点查找方法 j 阅读全文
posted @ 2020-04-23 09:10 白。。 阅读(736) 评论(0) 推荐(0)
2020年3月21日
爬取知乎热度
摘要： import requestsimport reimport pandas as pdheaders = { 'User-Agent': ''}response = requests.get('https://tophub.today/n/mproPpoq6O',headers=headers)ht 阅读全文
posted @ 2020-03-21 20:49 白。。 阅读(203) 评论(0) 推荐(0)