和平村

摘要： 反爬原因 爬虫占总PV高，浪费了服务器的流量资源 资源获取太多导致公司造成损失 法律的灰色地带 种类 数据污染反爬，数据陷阱反爬，大文件url反爬，这些都需要累计熟练度来进行处理 解决方案：没有什么技巧，都是通过观察，如果提取不到想要数据就需要多尝试，这是一个熟练度的问题 数据加密反爬，猫眼电影评分 阅读全文

摘要： matplotlib绘制图形 绘制图形有两种方式可以绘制 第一种是通过导入的plt来直接绘制图形，适合只绘制一个图形情况 from matplotlib import pyplot as plt plt.figure() # 可以设置画图分为几块，只分为一块写不写都可以，表示1行1列第1个图 plt 阅读全文

摘要： 概述 无序刷新网页返回数据给HTML 局部刷新技术，提高用户体验 无需刷新页面来更新数据 依赖于javascript脚本语言 操作 具体不做赘述，网址：https://www.w3school.com.cn/ajax/index.asp 或者菜鸟教程：https://www.runoob.com/a 阅读全文

摘要： 前言 Flex布局（全称：Flexible Box） 也名为弹性布局 用于布置一些特殊的、不好实现的布局、为盒状模型提供强大的灵活性 常规的布局都比较依赖display/position/float这三个属性，但有时对于复杂的布局的时候不好实现 在属性中标明display: flex;或者是行内标签 阅读全文

摘要： 使用pymsyql操作数据库 一.pymysql的主要方法 pymysql.connect()参数说明:（连接数据库时需要添加的参数） host(str): MySQL服务器地址 port(int): MySQL服务器端口号 user(str): 用户名 passwd(str): 密码 db(str 阅读全文

摘要： 正则表达式中的常用函数 正则表达式本身是一种小型的、高度专业化的编程语言，而在python中，通过内嵌集成re模块来实现正则匹配。 re模块中常用功能函数： 1、compile()： 编译正则表达式模式，返回一个正则对象的模式。（可以把那些常用的正则表达式编译成正则表达式对象，这样可以提高一点效率。 阅读全文

摘要： 数据类型 强类型语言（必须先定义后使用，安全性高，严谨） 数据类型（基础类型、引用类型） 运算符（加减乘除，自增减，与或非，位运算符，比较运算符，三元运算符） 数据类型转换（float a = (int) 12;） 条件判断与循环 条件判断（if、switch） 循环语句（for、while、do- 阅读全文

摘要： 爬虫获取数据 发起请求 import requests # 返回的是一个<class 'requests.models.Response'>类型数据 r = reuqests.get(url, headers) 请求回的数据的相关操作 # 获取请求数据的状态，返回200为请求成功 r.status_ 阅读全文

摘要： 优点 使用线程可以把占据长时间的程序中的任务放到后台去处理。 用户界面可以更加吸引人，比如用户点击了一个按钮去触发某些事件的处理... 阅读全文

摘要： 文件的读取 文件的基础操作 写入文件 a = [1,2,3,4,5,6,7,8,9]with open('./log.txt', ... 阅读全文