有关心情

摘要： 关于子类访问父类的类变量问题 Python作为一门弱类型语言，创建变量时不用像C语言那样事先声明（如：int xxx/char xxx），只要是=符号左边的变量Python找不到，它就会自己去创建。源此有题如下： class A(object): x = 1class B(A): passclass 阅读全文

摘要： pip install browsercookie报错问题 @(配置问题)[python, browsercookie] [TOC] 背景 这几天在看《精通Scrapy网络爬虫》一书，需要涉及到 browsercookie 库的安装。一切有些不如人意，花了两三个小时才安装成功，所以在这里记录一下，一 阅读全文

摘要： logging模块@(杂庭忆技)[Python, logging]logging模块简单示例日志等级简单设置HandlerFileHandler其他Handler捕获Traceback配置共享文件配置018.8.17简单示例import logging ... 阅读全文

摘要： 今天爬知乎的时候把整个html写进本地文件，拟先用浏览器打开，观察爬虫请求到的网页大致什么样子，再做解析页面的策略但浏览器打开.html文件后页面一直跳转，如下 解决方案： 用文本编辑器打开html文件，按Ctrl+H，将全文的js替换成空格或者其他即可 再打开就正常... 阅读全文

摘要： 知乎登陆@(博客)[Python, 登陆, 知乎, 爬虫]知乎登陆背景题外话环境寻找切入点问题的转移1问题的转移2继续撸开始代码完善代码018.8.12背景因为学年综合实践准备的一部分需要爬取知乎全站，所以为了方便，自动登陆是很有必要的。而由于许多学习爬虫的各友，都爱... 阅读全文

摘要： 完整报错如下：ERROR: Spider must return Request, BaseItem, dict or None, got 'ArticleItemLoader' in 通过设置断点排查，发现是我在spiders目录下的爬虫文件，在yield的时候，写... 阅读全文

摘要： Python下载会员歌曲@(博客)[QQ|会员音乐|下载]Python下载会员歌曲前言目标使用库分析（1）文件A（2）文件B（3）文件C（4）文件D（5）注意事项最后018.8.81. 由于本人是法盲，所以是否涉及侵权QQ音乐不知；如若侵权，相告即删 2. 相关代码仅... 阅读全文

摘要： 问题：利用Scrapy框架爬伯乐在线的时候，涉及到图片下载，因为scrapy框架中内置有图片下载功能，所以没有另外写，直接使用。在settings.py中做了如下修改：ITEM_PIPELINES = { 'Article.pipelines.ArticlePi... 阅读全文

摘要： 初谈指针（2）初谈指针（2）前言指针与二维数组指针函数函数指针指针数组数组指针指针常量常量指针字符指针数组和二维字符数组连连看前言上一篇（初探指针（1））从指针的概念开始入手，依次是：什么是指针>>指针传递>>多级指针>>指针函数。尽管指针远不于此，但寻常应付想来足够... 阅读全文

摘要： Python爬虫-RedisPython爬虫-Redis前言启动服务器启动客户端数据操作string键命令hashlistsetzset发布订阅主从配置与python交互利用redis实战反思前言作为跟MongoDB同样NoSQL阵营的Redis，也具有类似的“直爽快... 阅读全文