2015年3月23日
Scrapy安装过程中出现“'libxml/xmlversion.h' file not found“报错的处理方法
摘要： 在Mac上使用“easy_install scrapy”命令安装Scrapy时，出现xmlversion.h头文件不存在的报错：查阅了一些资料，有可能是Mac升级到了Yosemite造成的，使用控制台安装command line tools就可以解决了。在控制台执行如下命令：xcode-select... 阅读全文
posted @ 2015-03-23 12:47 007wangkai 阅读(414) 评论(0) 推荐(0)
Python获取动态网页内容的一种处理方法
摘要： 在使用Python爬取网页数据时，常常会出现网页的源码与实际显示的内容有出入的情况，当网页为动态网页时就会出现这种情况，下面用QQ音乐的某个页面举例如何使用Python爬取改网页数据：网址：http://y.qq.com/#type=singer&mid=000GDDuQ3sGQiT&tab=alb... 阅读全文
posted @ 2015-03-23 12:36 007wangkai 阅读(671) 评论(0) 推荐(0)
Python处理HTML转义字符
摘要： 使用Python抓取QQ音乐库数据时，音乐名中出现一些奇怪字符，下面的抓取结果中，《执迷不悔 （国语）》就变成了“执迷不悔 (国语)”：Python自带的HTMLParser模块可以解决这个问题：html = '(Hello)'import HTMLParse... 阅读全文
posted @ 2015-03-23 12:07 007wangkai 阅读(597) 评论(0) 推荐(0)