会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
oxoxoox
博客园
首页
新随笔
联系
订阅
管理
2021年12月7日
数据采集与融合技术_实验五
摘要: 码云链接:实验五 作业①: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 **候选网站:**http://www.jd.com/ **关键词:**学生自由选择 **输出信息:**MYSQ
阅读全文
posted @ 2021-12-07 10:14 oxoxoox
阅读(140)
评论(0)
推荐(0)
2021年11月23日
数据采集与融合技术_实验四
摘要: 码云链接:欧翔实验四 1.作业①: **要求:**熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 **候选网站:**http://search.dangdang.com/?key=python&
阅读全文
posted @ 2021-11-23 20:43 oxoxoox
阅读(139)
评论(0)
推荐(0)
2021年11月9日
数据采集与融合技术_实验三
摘要: 码云链接:实验三 1.作业① 1.1作业内容 内容:指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后4位) 输出信息: 将下载的Url信息在控制台输出,并将下载的图片存储在
阅读全文
posted @ 2021-11-09 21:14 oxoxoox
阅读(47)
评论(0)
推荐(0)
2021年10月25日
数据采集与融合技术_实验二
摘要: 码云地址:https://gitee.com/a2625113421/data-acquisition-practice-ii 作业① 1)要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: | 序号 | 地区 | 日期 |
阅读全文
posted @ 2021-10-25 23:32 oxoxoox
阅读(136)
评论(0)
推荐(0)
2021年10月12日
数据采集与融合技术_实验一
摘要: 码云地址:https://gitee.com/a2625113421/data-acquisition-practice-i 作业①: 1)、大学软工排名信息的爬取 – 要求:用urllib和re库方法定向爬取给定网址https://www.shanghairanking.cn/rankings/b
阅读全文
posted @ 2021-10-12 20:12 oxoxoox
阅读(53)
评论(0)
推荐(0)
公告