一起来学python

摘要： 1.一个爬虫大佬的网站 https://www.urlteam.org/category/web_crawlers/ 2.反反爬虫仓库 https://github.com/luyishisi/Anti-Anti-Spider 3.useragent的一些信息 https://www.cnblogs 阅读全文

摘要： #!/usr/bin/env python # encoding: utf-8 import aiohttp import asyncio import time # 通过async def定义的函数是原生的协程对象 async def fetch_async(): conn=aiohttp.TCPConnector(verify_ssl=Flase) async wi... 阅读全文

摘要： 我们都知道对于I/O相关的程序来说，异步编程可以大幅度的提高系统的吞吐量，因为在某个I/O操作的读写过程中，系统可以先去处理其它的操作（通常是其它的I/O操作），那么Python中是如何实现异步编程的呢？ 简单的回答是Python通过协程(coroutine)来实现异步编程。那究竟啥是协程呢？这将是 阅读全文

摘要： 以下链接均来自网络 『Python并发编程』 理解Python并发编程一篇就够了 - 线程篇理解Python并发编程一篇就够了 - 进程篇使用Python进行并发编程-PoolExecutor篇使用Python进行并发编程-我为什么不喜欢Gevent使用Python进行并发编程-asyncio篇(一 阅读全文

摘要： 1.首先定义一个log文件 2.然后定义一个装饰器文件 在这里引用wraps,一个装饰器的装饰器，目的为了保持引用进来的函数名字不发生变化 3.在使用的时候直接在函数上面引用即可 阅读全文

摘要： 前提： Android使用Charles抓取Https请求的报文时，Android和Charles都正确安装了证书之后出现抓包失败，报错SSLHandshake: Received fatal alert: certificate_unknown，如下图所示： 原因： 安卓7之后调整了安全策略会导致 阅读全文

摘要： #!/usr/bin/env python # encoding: utf-8 import pymysql from config.config import * import datetime def get_conn(): conn=pymysql.connect(host=HOST,port=PORT,user=USER,passwd=PASSWORD,db=DB,char... 阅读全文

摘要： 1. "su"的加密算法，su是username经过BASE64计算得来的： 2.获取sp的值，就是密码rsa的加密值 1.首先访问http://login.sina.com.cn/sso/prelogin.php?entry=weibo&callback=sinaSSOController.pre 阅读全文

摘要： #!/usr/bin/env python # encoding: utf-8 import requests from random import choice from lxml import html from urllib.parse import urljoin,quote import os import time NAMEURLDIC={} NAMEURLDIC_L2={} u... 阅读全文

摘要： https://crontab.guru/ 阅读全文