04 2019 档案

爬虫综合大作业
摘要：从爬出的数据不难发现，现役nba球员绝大部分是美国人。可想而知，美国本土的篮球文化是多么的浓厚。其中，也有其它国家的球员。那么我们可以从分析的数据中了解下其它国家的球员到底是谁.... 西班牙籍球员： 法国籍球员： 原来爵士的内线高塔戈贝尔就是法国球员哦~ 再来看下联盟球员球衣号码的数量统计 这样就 阅读全文
posted @ 2019-04-28 21:22 cjvil 阅读(246) 评论(0) 推荐(0) 编辑
爬取全部的校园新闻
摘要：1.从新闻url获取新闻详情： 字典,anews 2.从列表页的url获取新闻url：列表append(字典) alist 3.生成所页列表页的url并获取全部新闻 ：列表extend(列表) allnews 4.设置合理的爬取间隔 import time import random time.sl 阅读全文
posted @ 2019-04-12 11:02 cjvil 阅读(164) 评论(0) 推荐(0) 编辑
获取一篇新闻的全部信息
摘要：给定一篇新闻的链接newsUrl，获取该新闻的全部信息 标题、作者、发布单位、审核、来源 发布时间:转换成datetime类型 点击： newsUrl newsId(使用正则表达式re) clickUrl(str.format(newsId)) requests.get(clickUrl) newC 阅读全文
posted @ 2019-04-01 21:20 cjvil 阅读(90) 评论(0) 推荐(0) 编辑