摘要：本人使用爬虫从某数据库中下载了一批数据，本地存为json格式（pgp.json）然后使用python中的json模块进行解析（json.load）,一直出现下述错误 从google中查找到了同样错误的帖子，尝试修改编码方式，可一直未能解决。由于这个错误没有给出具体的错误来源，很难定位问题所在，这个问 阅读全文

摘要：书接上回 实例教程（一） 本文将详细描述使用scrapy爬去左岸读书所有文章并存入本地MySql数据库中，文中所有操作都是建立在scrapy已经配置完毕，并且系统中已经安装了Mysql数据库（有权限操作数据库）。 为了避免读者混淆，这里也使用tutorial作为scrapy project名称（工程 阅读全文

摘要：Scrapy（官网 http://scrapy.org/）是一款功能强大的，用户可定制的网络爬虫软件包。其官方描述称：" Scrapy is a fast high-level screen scraping and web crawling framework, used to crawl web 阅读全文

摘要：Python越来越受“程序猿”们的青睐。快速的开发模式，简洁的代码格式，海量的扩展，这无疑都为python的火热奠定了基础。 “磨刀不误砍柴工”，一款功能强劲的IDE能帮助开发者有效的管理、编辑，运行工程代码。Python的开发IDE比较常用的Eclipse + Pydev、JetBrains的Py 阅读全文