随笔分类 -  PYTHON

【python】执行js代码
摘要：python简单执行js代码：https://blog.csdn.net/ychgyyn/article/details/90112448 阅读全文
posted @ 2020-08-07 22:06 Shuranima 阅读(99) 评论(0) 推荐(0)
【Python】协程
摘要：#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2020/7/14 23:10 # @Author : Shuranima # @File : asyncio单任务协程.py # 协程的使用创建和单任务协程 import asyncio 阅读全文
posted @ 2020-08-02 22:05 Shuranima 阅读(127) 评论(0) 推荐(0)
【Python】requests下载+进度条
摘要：#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2020/8/1 13:05 # @Author : Shuranima # @File : Single_thread_download.py # import os import re 阅读全文
posted @ 2020-08-01 22:00 Shuranima 阅读(920) 评论(0) 推荐(0)
【爬虫框架】分布式爬虫
摘要：scrapy-redis和scrapy有什么区别？ scrapy是一个通用的爬虫，但是它不支持分布式，scrapy需要怎样才能实现分布式？ 1.一个共享的调度器，用与给分布式下的各个机器调度、分配请求队列，包括去重等功能。 2.一个共享的管道，进行各个机器下爬取的数据集中管理。 scrapy-red 阅读全文
posted @ 2020-07-28 22:35 Shuranima 阅读(266) 评论(0) 推荐(0)
【爬虫框架】Scrapy基本使用
摘要：环境的安装： mac or linux： pip install scrapy windows: pip install wheel 下载twisted，下载地址为http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 安装twisted：pip ins 阅读全文
posted @ 2020-07-27 22:16 Shuranima 阅读(112) 评论(0) 推荐(0)
【Python模块】selenium基本使用
摘要：selenium简介： Selenium是一个用于测试网站的自动化测试工具，支持多系统Windows、Linux、IOS、Android等，支持各种浏览器包括Chrome、Firefox、Safari等主流界面浏览器，同时也支持phantomJS无界面浏览器。 selenium安装： pip ins 阅读全文
posted @ 2020-07-25 18:20 Shuranima 阅读(201) 评论(0) 推荐(0)
【Mysql】Python操作
摘要：一、安装pymysql pip 是 Python 包管理工具,该工具提供了对Python 包的查找、下载、安装、卸载的功能。 python2，默认无pip命令 python3，默认自带pip命令 解决一般pip错误（pip更新）： 1.使用python -m pip install --upgrad 阅读全文
posted @ 2020-07-24 21:50 Shuranima 阅读(125) 评论(0) 推荐(0)