会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
microman
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
2016年12月6日
ubuntu系统下安装pyspider:解决pyspider启动时不启动phantomjs问题
摘要: 问题描述: 在建立第一个虚拟环境时,运行pyspider正常。建立第二个虚拟环境时,运行pyspider再现下面错误。应该是phantomjs没有启动成功。 解决方法: 找到phantomjs安装的位置,把phantomjs复制到/usr/local/bin
阅读全文
posted @ 2016-12-06 10:00 microman
阅读(1976)
评论(0)
推荐(0)
2016年12月5日
ubuntu系统中解决github下载速度慢问题
摘要: 如果你在使用github,出现访问和下载速度慢问题,可以通过修改host解决。记得不要踩坑哦!分四步: 第一步:查询速度快的IP地址 在http://tool.chinaz.com/dns中查询下面三个域名: github.com 把TTL值最小的IP地址记录下来。 第二步:修改HOST文件 进入终
阅读全文
posted @ 2016-12-05 11:26 microman
阅读(2335)
评论(1)
推荐(0)
2016年11月28日
pyspider示例代码三:用PyQuery解析页面数据
摘要: 本系列文章主要记录和讲解pyspider的示例代码,希望能抛砖引玉。pyspider示例代码官方网站是http://demo.pyspider.org/。上面的示例代码太多,无从下手。因此本人找出一些比较经典的示例进行简单讲解,希望对新手有一些帮助。 示例说明: 本示例主要是PyQuery解析返回的
阅读全文
posted @ 2016-11-28 22:36 microman
阅读(7543)
评论(0)
推荐(0)
pyspider示例代码二:解析JSON数据
摘要: 本系列文章主要记录和讲解pyspider的示例代码,希望能抛砖引玉。pyspider示例代码官方网站是http://demo.pyspider.org/。上面的示例代码太多,无从下手。因此本人找出一下比较经典的示例进行简单讲解,希望对新手有一些帮助。 示例说明: pyspider爬取的内容通过回调的
阅读全文
posted @ 2016-11-28 22:14 microman
阅读(4027)
评论(0)
推荐(0)
pyspider示例代码一:利用phantomjs解决js问题
摘要: 本系列文章主要记录和讲解pyspider的示例代码,希望能抛砖引玉。pyspider示例代码官方网站是http://demo.pyspider.org/。上面的示例代码太多,无从下手。因此本人找出一下比较经典的示例进行简单讲解,希望对新手有一些帮助。 示例说明: 如果页面中部分数据或文字由js生成,
阅读全文
posted @ 2016-11-28 16:50 microman
阅读(4924)
评论(0)
推荐(0)
让Ubuntu使用阿里云国内源,解决下载速度慢问题。
摘要: 阿里云镜像官方地址 http://mirrors.aliyun.com/ 找到最新源地址列表: http://www.linuxdiyf.com/linux/23163.html 软件包管理中心(推荐) 在软件包管理中心“软件源”中选择“中国的服务器”下mirros.aliyun.com即可自动使用
阅读全文
posted @ 2016-11-28 14:23 microman
阅读(25093)
评论(2)
推荐(1)
2016年11月27日
让PIP源使用国内镜像,提升下载速度和安装成功率。
摘要: 对于Python开发用户来讲,PIP安装软件包是家常便饭。但国外的源下载速度实在太慢,浪费时间。而且经常出现下载后安装出错问题。所以把PIP安装源替换成国内镜像,可以大幅提升下载速度,还可以提高安装成功率。 国内源: 新版ubuntu要求使用https源,要注意。 清华:https://pypi.t
阅读全文
posted @ 2016-11-27 23:15 microman
阅读(202599)
评论(4)
推荐(16)
上一页
1
2
公告