代码改变世界

随笔档案-2017年10月

数据结构化与保存

2017-10-19 20:08 by 421徐均钧, 162 阅读, 收藏,
摘要: 1、结构化 单条新闻的详情字典:news 一个列表页所有单条新闻汇总列表:newsls.append(news) 所有列表页的所有新闻汇总列表:newstotal.extend(newsls) 2、转换成pandas的数据结构DataFrame 3、从DataFrame保存到excel 4、从Dat 阅读全文

爬取校园网新闻

2017-10-12 21:10 by 421徐均钧, 250 阅读, 收藏,
摘要: 1.获取单条新闻的#标题#链接#时间#来源#内容 #点击次数,并包装成一个函数。 2.获取一个新闻列表页的所有新闻的上述详情,并包装成一个函数。 3.获取所有新闻列表页的网址,调用上述函数。 4.完成所有校园新闻的爬取工作。 阅读全文