07 2019 档案

scrapy爬虫笔记（入门级案例）
摘要：初学scrapy框架，很多地方一知半解，先跟着书上的代码一个字一个字敲，还有很多细节值得钻研 先来个简单的吧，新建一个scrapy项目xiaozhu 小猪短租信息爬取、不分页、不进入详细页面查找，输出形式为打印 只搜寻一个网页上的信息 http://bj.xiaozhu.com/search-dua 阅读全文
posted @ 2019-07-26 10:57 aby321 阅读(273) 评论(0) 推荐(0)
scrapy爬虫笔记（创建一个新的项目并运行）
摘要：前期安装请参考： scrapy爬虫笔记（安装） 在确保安装环境没有问题的情况下，新建一个项目需要在cmd中进行 首先，在自定义的文件夹（我的是E:\study\python_anaconda_pf\MyProject\scrapy_study）下面创建一个工程，我的工程名字为movie_250 在文 阅读全文
posted @ 2019-07-25 16:20 aby321 阅读(1800) 评论(0) 推荐(0)
scrapy爬虫笔记（安装）
摘要：我的环境： win7 32bit Anaconda3 python 3.7 如果你是小白可以参考：https://www.cnblogs.com/zlslch/p/8316835.html 在python3中需要安装的第三方库： lxml、zope.interface、twisted、pyOpenS 阅读全文
posted @ 2019-07-25 14:44 aby321 阅读(221) 评论(0) 推荐(0)
运行scrapy报错：You do not have a working installation of the service_identity module
摘要：运行scrapy报错：You do not have a working installation of the service_identity module 查了下service_identity这个库已经是安装好了 然鹅卸了装，装了卸，反反复复均是会提示这个错误 问了度娘之后，找到了个解决方案 阅读全文
posted @ 2019-07-25 14:42 aby321 阅读(962) 评论(0) 推荐(0)
运行scrapy demo时报错：[twisted] CRITICAL: Unhandled error in Deferred
摘要：在学习scrapy架构时候，按照书上一步一步操作，在保证所有库安装没有问题的情况下，运行报错如下： 度娘之后看到这个帖子，按照他的方法果然解决了问题 https://blog.csdn.net/qinqigang/article/details/91410465 问题原因：sqlite包导入有问题 阅读全文
posted @ 2019-07-25 12:52 aby321 阅读(3709) 评论(0) 推荐(0)
python3下使用有道翻译网页版实现翻译功能~~~附源码
摘要：有道在线翻译：http://fanyi.youdao.com/ 在python3中，使用post提交数据进行翻译，默认中英，可更改语言 按F12 打开开发者工具，在左侧输入“我爱你”翻译，在右侧观察network中提交的post数据Form Data格式，如下 在preview中查看翻译结果，可以看 阅读全文
posted @ 2019-07-18 09:55 aby321 阅读(1297) 评论(0) 推荐(0)