07 2020 档案
摘要:1.使用线程池爬取 from multiprocessing.dummy import Poolimport times = time.time()urls = ['www.111.com', 'www.222.com', 'www.333.com', 'www.444.com', 'www.55
阅读全文
摘要:回顾 简历模板: ConectionPool: 原因: 1.在短时间内向网站发起了一个高频的请求 使用代理 2.连接池(http)中的资源被耗尽 立即将请求断开: Connection:close 高清图片: 图片懒加载:在img标签中应用了伪属性 回顾 数据解析的作用:为了实现聚焦爬虫 bs4:
阅读全文
摘要:回顾 爬虫 爬虫的分类: 通用 聚焦 增量式:监测 反爬机制 反反爬策略 robots,UA监测:UA伪装 http&https概念:服务器和客户端进行数据交互的某种形式 常用的头信息: User-Agent:请求载体的身份标识 Connection:close content-type https
阅读全文
摘要:http: 概念:clinet和Server进行数据交互的某种形式 常用的头信息: User-Agent:请求载体的身份标识 Connection:close content-type: https: 概念:安全的http协议 证书 对称秘钥加密 非对称秘钥加密 证书秘钥加密方式 爬虫相关概述 爬虫
阅读全文
摘要:出处:https://www.cnblogs.com/xuexianqi/p/12803754.html 一:简介 phpStudy是一个PHP调试环境的程序集成包。 该程序包集成最新的Apache+PHP+MySQL+phpMyAdmin+ZendOptimizer,一次性安装,无须配置即可使用,
阅读全文
摘要:出处:https://www.cnblogs.com/xuexianqi/p/12797170.html 一:简介 Navicat是一套快速、可靠的数据库管理工具,专为简化数据库的管理及降低系统管理成本而设。 它的设计符合数据库管理员、开发人员及中小企业的需要。 Navicat 是以直觉化的图形用户
阅读全文
摘要:原创:https://www.cnblogs.com/xuexianqi/p/12795890.html 一:简介 MySQL是一种开放源代码的关系型数据库管理系统(RDBMS),使用最常用的数据库管理语言--结构化查询语言(SQL)进行数据库管理。 MySQL是开放源代码的,因此任何人都可以在Ge
阅读全文
摘要:出处:https://www.cnblogs.com/xuexianqi/p/12400896.html 一:Python解释器为什么要2个版本? 众所周知,Python2.7是一个过渡版本。 很多公司写的项目并不是基于最新的Python3写的,在之后进行一些项目更改的时候,Python3的语法有一
阅读全文
摘要:出处:https://www.cnblogs.com/xuexianqi/p/12378617.html 一:什么是Pycharm PyCharm是一种Python IDE,带有一整套可以帮助用户在使用Python语言开发时提高其效率的工具,比如调试、语法高亮、Project管理、代码跳转、智能提示
阅读全文
摘要:一:什么是Python解释器 解释器(英语:Interpreter),又译为直译器,是一种电脑程序能够把高级编程语言一行一行直接转译运行。 解释器不会一次把整个程序转译出来,只像一位“中间人”,每次运行程序时都要先转成另一种语言再作运行,因此解释器的程序运行速度比较缓慢。 它每转译一行程序叙述就立刻
阅读全文
摘要:此文章转载至大佬的:https://www.cnblogs.com/xuexianqi/ 一:计算机基础 Python正课1 —— 计算机基础 Python正课2 —— 计算机基础补充 二:Python基本语法 Python正课3 —— Python入门 Python正课4 —— 变量 Python
阅读全文

浙公网安备 33010602011771号