2020年4月
爬取天气网城市天气，并对其进行分析
摘要： 一.主题式网络主题式网络爬虫设计方案 1、主题式网络爬虫名称 天气网数据获取及数据分析2、主题式网络爬虫爬取的内容与数据特征分析 历史天气和未来天气3、主题式网络爬虫设计方案概述（包括实现思路与技术难点） 思路: 通过天气页获取所有城市名称以及历史天气数据链接 难点: 天气网反爬虫检测 二.主题页面 阅读全文
posted @ 2020-04-16 13:56 tzq- 阅读(704) 评论(0) 推荐(0) 编辑
2020年3月
爬取贴吧热议榜
摘要： import requests from bs4 import BeautifulSoup import pandas as pd titles=[] hots=[] url='http://tieba.baidu.com/hottopic/browse/topicList?res_type=1&r 阅读全文
posted @ 2020-03-19 15:35 tzq- 阅读(177) 评论(0) 推荐(0) 编辑