摘要: 【数据采集与融合技术】第五次大作业 【数据采集与融合技术】第五次大作业 「数据采集」实验五 一、作业① 1.1 题目 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 **候选网站:**ht 阅读全文
posted @ 2021-11-24 23:08 暴走小铸币 阅读(37) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第四次大作业 「数据采集」实验四 一、作业① 1.1 题目 **要求:**熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 **候选网站:**http://search.da 阅读全文
posted @ 2021-11-13 22:28 暴走小铸币 阅读(80) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第三次大作业 「数据采集」实验三 一、作业① 1.1 题目 **要求:**指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 输出信息: 将下载的 阅读全文
posted @ 2021-10-28 20:42 暴走小铸币 阅读(88) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第二次大作业 「数据采集」实验一 一、作业① 1.1 题目 **要求:**在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: 序号 地区 日期 天气信息 温度 1 北京 7日(今天) 晴间多云,北部山区有阵雨 阅读全文
posted @ 2021-10-14 12:02 暴走小铸币 阅读(45) 评论(0) 推荐(0) 编辑
摘要: 「数据采集」实验一 一、作业① 1.1 题目 **要求:**用urllib和re库方法定向爬取给定网址中国最好学科排名(计算机科学与技术)的数据。 输出形式: 2020排名 全部层次 学校类型 总分 1 前2% 中国人民大学 1069.0 2 .... ........... ...... 1.2 阅读全文
posted @ 2021-09-29 22:58 暴走小铸币 阅读(97) 评论(0) 推荐(0) 编辑
摘要: 一、自我介绍 ​ 学号031904111;黄舒俊;我的爱好是篮球,penbeat,摄影,写代码;我最喜欢肉末茄子(玫瑰一层);最近在听STAY;很高兴在博客分享学习过程的心路历程 二、阅读与思考 ​ 现状:CS科班大三学生√准备考研√仍然对专业的作用以及未来的工作一头雾水 ​ 期望:在剩下的两年能够 阅读全文
posted @ 2021-09-06 21:06 暴走小铸币 阅读(79) 评论(0) 推荐(0) 编辑