摘要: 有些网站做了反爬技术,如:比较初级的通过判断请求头部中的user-agent字段来检测是否通过浏览器访问的。 在爬这类网站时需要模拟user-agent user-agent.txt 百度网盘 链接:https://pan.baidu.com/s/1ramkIyjVSI2_GXbxypj1Dg 提取 阅读全文
posted @ 2019-10-02 20:56 破壳而出的蝌蚪 阅读(817) 评论(0) 推荐(0)
摘要: 为每个进程分配一定数量的页面,然后在由进程去给线程分配待抓取页面,抓取到信息之后保存到“博客园.csv”文件中。 第三方模块 aiohttp : 协程模块 beautifulsoup4:解析模块 安装 : pip install aiohttp pip install beautifulsoup4 阅读全文
posted @ 2019-09-27 13:12 破壳而出的蝌蚪 阅读(356) 评论(0) 推荐(0)
摘要: abc 是抽象类模块abc.ABC 是继承抽象类 也可直接继承 (metaclass=ABCMeta)abc.abstractmethod 是定义抽象方法简单工厂模式:通过接口创建对象,但不会暴露对象创建逻辑在设计模式中主要用于抽象对象的创建过程,让用户可以指定自己想要的对象而不必关心对象的实例化过 阅读全文
posted @ 2019-09-24 16:12 破壳而出的蝌蚪 阅读(533) 评论(0) 推荐(0)
摘要: 爬虫主要抓取首页文档列表中的信息如:作者、头像、文章标题、摘要、发布时间、推荐次数、评论次数、阅读次数。 采用协程方式进行抓取页面,然后把信息保存到"博客园.csv"文件中。 采用了 第三方库 aiohttp、beautifulsoup4 如图: 部分代码 百度网盘下载: 链接:https://pa 阅读全文
posted @ 2019-09-21 16:59 破壳而出的蝌蚪 阅读(484) 评论(0) 推荐(0)
摘要: 介绍 1:当图片加载失败时,给出错误提示。 2:当图片加载中时,给出加载提示。 3:图片处理模式:等比缩放/裁剪/填充/... 1、图片加载状态处理 通过给图片绑定load事件与error事件处理函数来判断图片加载状态。当图片加载完成时会触发load事件;图片加载出错会触发error事件 2、图片模 阅读全文
posted @ 2019-06-05 22:39 破壳而出的蝌蚪 阅读(8436) 评论(0) 推荐(0)
摘要: 远程图片 在真机上测试时 image组件只能显示http请求的图片, 对https 与 //xxx.xxx.xx 之类的不能显示。 可显示 不能显示 个人项目 淘宝天猫粉丝专享优惠券 阅读全文
posted @ 2019-05-27 23:28 破壳而出的蝌蚪 阅读(979) 评论(0) 推荐(0)
摘要: swiper 组件高度被限制为150px了,所以内容无法撑开。 解决办法 给这组件重新设置个高度,然后在把里面的图片设置为自动适应容器大小。图片模式设置为 宽度不变 自动适应高度 阅读全文
posted @ 2019-05-25 23:21 破壳而出的蝌蚪 阅读(920) 评论(0) 推荐(0)
摘要: 呵呵。介绍说是类似vue,用起来真累人,就想在模板中使用个函数都要查N久的文档才知道。 具体要怎么操作呢? 要先创建个wxs脚本文件,在里面定义函数或其它的,然后在页面或组件中引入这文件,就可以在模板中使用了。 真搞不懂为什么要绕这么一大圈,直接可以使用在methods中定义的方法不行吗? 恶心的一 阅读全文
posted @ 2019-05-24 20:57 破壳而出的蝌蚪 阅读(1154) 评论(0) 推荐(0)
摘要: 背景 页面采用ajax获取数据时,每访问一次就会发送一次请求向服务端获取数据,可是呢。 有些数据更新的又不频繁,所以我就想着使用localStorage进行本地存储,然后在固定间隔时在去更新数据。(下载地址:https://gitee.com/whnba/data_storage) 结构设计 exp 阅读全文
posted @ 2019-05-22 21:38 破壳而出的蝌蚪 阅读(1160) 评论(0) 推荐(0)
摘要: https://www.cnblogs.com/wisewrong/archive/2018/12/28/10186611.html 参考这个就行。 而我这篇文章主要是对里面的相关步骤作一些简单的说明。 1:安装Vue-cli3 2:目录创建:packages 目录用于存放自己定义的组件 examp 阅读全文
posted @ 2019-04-30 22:21 破壳而出的蝌蚪 阅读(993) 评论(0) 推荐(0)