摘要:
概要 基于终端指令的持久化存储 基于管道的持久化存储 1.基于终端指令的持久化存储 保证爬虫文件的parse方法中有可迭代类型对象(通常为列表or字典)的返回,该返回值可以通过终端指令的形式写入指定格式的文件中进行持久化操作。 执行输出指定格式进行存储:将爬取到的数据写入不同格式的文件中进行存储 s
阅读全文
posted @ 2019-01-10 17:48
小米没吃饭
阅读(156)
推荐(0)
摘要:
黑客技术一度被认为是一个神秘的特有领域,随着技术的进步和领域环境的进步,它已经成为一种非常普遍的现象。黑客技术可以用于有害目的,也可以用于发现系统中的漏洞,并通知系统属主,帮助他们更好地保护系统。 借助于一些工具及其基本知识,黑客可以更高效地执行安全测试,这对他们的任务有很大帮助。以下介绍黑客十大常
阅读全文
posted @ 2019-01-10 17:07
小米没吃饭
阅读(2253)
推荐(0)
摘要:
概要: 图片懒加载 selenium phantomJs 谷歌无头浏览器 动态数据加载处理 一.图片懒加载 什么是图片懒加载? 案例分析:抓取站长素材http://sc.chinaz.com/中的图片数据 #!/usr/bin/env python # -*- coding:utf-8 -*- im
阅读全文
posted @ 2019-01-10 16:48
小米没吃饭
阅读(398)
推荐(0)
摘要:
1. 概述 FormData类型其实是在XMLHttpRequest 2级定义的,它是为序列化表以及创建与表单格式相同的数据(当然是用于XHR传输)提供便利。 2. 构造函数 创建一个formData对象实例有几种方式 1、创建一个空对象实例 var formData = new FormData(
阅读全文
posted @ 2018-12-31 15:21
小米没吃饭
阅读(1127)
推荐(0)
摘要:
这两天在看自己之前写的代码,所以正好把用过的东西整理一下,单例模式,在日常的代码工作中也是经常被用到, 所以这里把之前用过的不同方式实现的单例方式整理一下 装饰器的方式 这种方式也是工作中经常用的一种,用起来也比较方便,代码实现如下 def Singleton(cls): _instance = {
阅读全文
posted @ 2018-12-18 22:17
小米没吃饭
阅读(265)
推荐(0)
摘要:
Django Template Language 模板语言 一、标签 tags 1、普通变量 普通变量用{{ }} 变量名由数字、字母、下划线组成 点.在模板语言中用来获取对象相应的属性值 示例 {# 取variable中的第一个参数 #} {{ variable.0 }} {# 取字典dic中ke
阅读全文
posted @ 2018-12-18 18:03
小米没吃饭
阅读(211)
推荐(0)
摘要:
一、0.0.0.0 严格说来,0.0.0.0已经不是一个真正意义上的IP地址了。它表示的是这样一个集合:所有不清楚的主机和目的网络。这里的“不清楚”是指在本机的路由表里没有特定条目指明如何到达。对本机来说,它就是一个“收容所”,所有不认识的“三无”人员,一律送进去。如果你在网络设置中设置了缺省网关,
阅读全文
posted @ 2018-12-10 21:54
小米没吃饭
阅读(1031)
推荐(0)
摘要:
1 ######Nginx配置文件nginx.conf中文详解##### 2 3 #定义Nginx运行的用户和用户组 4 user www www; 5 6 #nginx进程数,建议设置为等于CPU总核心数。 7 worker_processes 8; 8 9 #全局错误日志定义类型,[ debug | info | notice | warn | e...
阅读全文
posted @ 2018-12-06 20:17
小米没吃饭
阅读(1162)
推荐(0)
摘要:
今日任务 1.Linux发行版的选择 2.vmware创建一个虚拟机(centos) 3.安装配置centos7 4.xshell配置连接虚拟机(centos) 选择性 pc可以选择 -纯系统 Linux/windows -双系统 Windows+Linux -虚拟化技术 Windows+vmwar
阅读全文
posted @ 2018-12-02 11:49
小米没吃饭
阅读(362)
推荐(0)
摘要:
CORS跨域请求 CORS即Cross Origin Resource Sharing 跨域资源共享, 那么跨域请求还分为两种,一种叫简单请求,一种是复杂请求~~ 简单请求 HTTP方法是下列方法之一 HEAD, GET,POST HTTP头信息不超出以下几种字段 Accept, Accept-La
阅读全文
posted @ 2018-11-27 16:45
小米没吃饭
阅读(144)
推荐(0)