上一页 1 ··· 16 17 18 19 20 21 22 23 24 ··· 32 下一页
摘要: BBS论坛(五) 5.1.cms后台修改密码功能完成 (1)新建app/forms.py # app/forms.py from wtforms import Form class BaseForm(Form): def get_error(self): message = self.errors. 阅读全文
posted @ 2018-11-26 16:00 王竹笙 阅读(303) 评论(0) 推荐(0)
摘要: Django REST framework+Vue 打造生鲜超市(十三) 目录 十四、social_django 集成第三方登录 14.1.申请应用 进入微博开放平台,首先要经过认证,然后才可以创建应用 地址:http://open.weibo.com/authentication 创建应用 写上应 阅读全文
posted @ 2018-11-26 15:13 王竹笙 阅读(31) 评论(0) 推荐(0)
摘要: Django REST framework+Vue 打造生鲜超市(十二) 目录 十三、首页、商品数量、缓存和限速功能开发 13.1.轮播图接口实现 首先把pycharm环境改成本地的,vue中local_host也改成本地 (1)goods/serializer class BannerSerial 阅读全文
posted @ 2018-11-26 15:09 王竹笙 阅读(54) 评论(0) 推荐(0)
摘要: Django REST framework+Vue 打造生鲜超市(四) 目录 五、商品列表页 5.1.django的view实现商品列表页 (1)goods/view_base.py 在goods文件夹下面新建view_base.py,为了区分django和django rest framework 阅读全文
posted @ 2018-11-26 14:13 王竹笙 阅读(71) 评论(0) 推荐(0)
摘要: Django REST framework+Vue 打造生鲜超市(一) 一、项目介绍 1.1.掌握的技术 Vue + Django Rest Framework 前后端分离技术 彻底玩转restful api 开发流程 Django Rest Framework 的功能实现和核心源码分析 Sentr 阅读全文
posted @ 2018-11-26 13:39 王竹笙 阅读(126) 评论(0) 推荐(0)
摘要: 一、代理 爬虫文件 daili.py middlewares.py 开启中间件 settings.py557行 scrapy crawl daili --nolog 会保存daili.html 在刘拉你打输入ip显示美国的ip 二、Scrapy的日志等级 在使用scrapy crawl spider 阅读全文
posted @ 2018-11-05 09:20 王竹笙 阅读(231) 评论(0) 推荐(0)
摘要: 动态数据加载处理 动态数据加载处理 一、图片懒加载 什么是图片懒加载? 案例分析:抓取站长素材http://sc.chinaz.com/中的图片数据 #!/usr/bin/env python # -*- coding:utf-8 -*- import requests from lxml impo 阅读全文
posted @ 2018-10-29 11:44 王竹笙 阅读(261) 评论(0) 推荐(0)
摘要: 数据解析三种方式 引言:回顾requests实现数据爬取的流程 指定url 基于requests模块发起请求 获取响应对象中的数据 进行持久化存储 其实,在上述流程中还需要较为重要的一步,就是在持久化存储之前需要进行指定数据解析。因为大多数情况下的需求,我们都会指定去使用聚焦爬虫,也就是爬取页面中指 阅读全文
posted @ 2018-10-29 11:01 王竹笙 阅读(74) 评论(0) 推荐(0)
摘要: 这里我们通过请求网页例子来一步步理解爬虫性能 当我们有一个列表存放了一些url需要我们获取相关数据,我们首先想到的是循环。 简单的循环串行 这一种方法相对来说是最慢的,因为一个一个循环,耗时是最长的,是所有的时间总和代码如下: 通过线程池 通过线程池的方式访问,这样整体的耗时是所有连接里耗时最久的那 阅读全文
posted @ 2018-10-26 14:59 王竹笙 阅读(203) 评论(0) 推荐(0)
摘要: 这篇文章中写了常用的下载中间件的用法和例子。Downloader Middleware处理的过程主要在调度器发送 requests请求的时候以及网页将 response结果返回给 spiders的时候,所以从这里我们可以知道下载中间件是介于 Scrapy的 request/response处理的钩子 阅读全文
posted @ 2018-10-26 14:48 王竹笙 阅读(322) 评论(0) 推荐(0)
上一页 1 ··· 16 17 18 19 20 21 22 23 24 ··· 32 下一页