06 2017 档案

摘要:之前安装下载各种模块,最后pip install scrapy安装scrapy爬虫框架。在针对爬取多个url的数据时,集成大量数据这时候需要用到scrapy爬虫。 这里放上一个scrapy安装教程链接:https://my.oschina.net/xtfjt1988/blog/364577 前天运行 阅读全文

posted @ 2017-06-28 10:34 扬也 阅读(207) 评论(1) 推荐(0)

摘要:my噶地~~ 学习了一段时间爬虫,了解最基本的模块。要开始连接数据库啦,遇到小问题,随笔mark。 爬虫就是在网页上解析数据,一开始只能爬到pycharm的显示栏,高级一点点的有图形化界面,可以爬取小说、文字、图片、小视频and so on,, 爬虫必备模块之urllib、urllib2、re、be 阅读全文

posted @ 2017-06-07 14:45 扬也 阅读(1039) 评论(0) 推荐(0)

导航