摘要： 数据采集与大数据处理综合实验报告 代码地址： https://gitee.com/jadevoice/data-collection-task-4 目录 作业①：东方财富网股票数据爬取实验 作业②：中国MOOC网课程数据爬取实验 作业③：大数据实时分析处理实验 作业①：东方财富网股票数据爬取实验 1 阅读全文

摘要： 🚀 拒绝平庸：我们是如何把一个“作业”做成下一代旅行神器的？ 做这个“旅宝 (Lübao)”项目的初衷其实特别简单：我们受够了做攻略时的手忙脚乱。 想象一下你平时做计划的样子：左手刷着小红书找网红店，右手开着地图看路线，还得切出去打开备忘录记时间。屏幕窗口切来切去，最后心态崩了，只想说一句：“算了 阅读全文

摘要： gitee: https://gitee.com/jadevoice/data-collection-tas/tree/hw3/ 作业① - 图片爬虫实验 一、实验内容 本实验要求爬取中国气象网（http://www.weather.com.cn）的所有图片，并实现单线程和多线程两种爬取方式。 技术 阅读全文

摘要： 一、在中国气象网爬取指定城市的 7 日天气预报并入库数据库 1. 作业实现过程与展示 本实验采用 requests + BeautifulSoup 进行页面解析，提取天气预报数据，并存入 SQLite 数据库。 数据库设计 字段 说明 id 主键，自增 city 城市名称 date 日期 weath 阅读全文

摘要： 用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 在分析网站的数据结构和请求方式后，发现无法像普通分页网页那样简单地循环请求分页数据，原因主要 阅读全文