10 2018 档案

关于content-type请求头的说明
摘要：Content-Type请求头的作用，用于标记请求体数据的格式，如： 1. Content-Type:application/x-www-form-urlencoded 请求体：b'pwd=123&user=root' 2. Content-Type:application/json 请求体：{"p 阅读全文
posted @ 2018-10-31 19:27 -Learning- 阅读(273) 评论(0) 推荐(0)
RabbitMQ
摘要：消息队列（Message Queue） 消息队列（MQ）是一种应用间的通信方式，消息发送后可以立即返回，由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁来取，消息使用者只管从 MQ 中取消息而不管是谁发布的。这样发布者和使用者都不用知道对方的存在 为什么使用消息队列？ 阅读全文
posted @ 2018-10-28 19:17 -Learning- 阅读(219) 评论(0) 推荐(0)
tornado
摘要：1.说明(异步非阻塞框架) 特点：自带socket，可以不用wsgi 原生支持websocket协议 组件支持少，不提供session，orm，form，admin，只提供路由系统，视图函数，模板渲染，加密cookie 使用特性：生成器，装饰器，future对象 适用场景： -服务端做的计算操作耗时 阅读全文
posted @ 2018-10-22 14:43 -Learning- 阅读(221) 评论(0) 推荐(0)
flask总结之session，websocket，上下文管理
摘要：1.关于session flask是带有session的，它加密后存储在用户浏览器的cookie中，可以通过app.seesion_interface源码查看 from flask import Flask,session app = Flask(__name__) app.secret_key = 阅读全文
posted @ 2018-10-09 23:36 -Learning- 阅读(722) 评论(0) 推荐(0)
爬虫相关问题总结
摘要：常见爬虫框架 常见的反爬虫措施有哪些？ 1）通过 Headers 反爬虫 从用户请求的 Headers 反爬虫是最常见的反爬虫策略。很多网站都会对 Headers 的 User-Agent进行检测，还有一部分网站会对 Referer 进行检测（一些资源网站的防盗链就是检测 Referer）。如果遇到 阅读全文
posted @ 2018-10-08 14:55 -Learning- 阅读(409) 评论(0) 推荐(0)
爬虫之scrapy框架
摘要：1.scrapy框架介绍 Scrapy是用纯Python实现的一个为了爬取网站数据、提取结构性数据而编写的应用框架 Scrapy 特色是使用了 Twisted异步网络框架来处理网络通讯，加快了下载速度，不用自己去实现异步框架，并且包含了各种中间件接口，可以灵活的完成各种需求 1.1 scrapy框架 阅读全文
posted @ 2018-10-01 22:36 -Learning- 阅读(485) 评论(0) 推荐(0)