08 2018 档案

摘要:最近想通过爬取豆瓣数据来练习下爬虫,这次做一个爬取豆瓣书籍的信息。 需求:通过爬取豆瓣图书小说这一标签的数据,将数据存入csv或者数据库里面。 思路:先从网页上爬取数据,然后存到csv,然后读取csv的数据写到数据库中。(别问我为什么不直接写数据库,还要在csv中转一次。o(╯□╰)o。。。因为这个 阅读全文
posted @ 2018-08-20 15:24 zww1 阅读(1520) 评论(0) 推荐(0)
摘要:忙了一个月的项目,终于有时间更新了。。。。更一个用requests爬豆瓣歌曲评论的吧。 爬虫思路:通过歌曲的id和爬取的页数,爬取评论的用户名,星级,评论日期,评论内容,然后写进csv。 直接上代码吧: 爬取的过程: 爬取的结果: 这里遇到一个问题,我用excel打开的时候是乱码,用记事本打开是正常 阅读全文
posted @ 2018-08-17 14:56 zww1 阅读(898) 评论(0) 推荐(0)