摘要：
python常用库大全： 环境管理 管理 Python 版本和环境的工具 p – 非常简单的交互式 python 版本管理工具。 pyenv – 简单的 Python 版本管理工具。 Vex – 可以在虚拟环境中执行命令。 virtualenv – 创建独立 Python 环境的工具。 virtua 阅读全文
posted @ 2019-12-27 14:11
故事的小黄花丶
阅读(711)
评论(0)
推荐(0)
摘要：
模拟浏览器访问-User-Agent： import urllib2 #User-Agent 模拟浏览器访问 headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, l 阅读全文
posted @ 2019-12-27 00:22
故事的小黄花丶
阅读(1007)
评论(0)
推荐(0)
摘要：
爬虫:请求网站并提取数据的自动化程序。 分为两种：1.通用爬虫。2.聚焦爬虫。 通用爬虫：搜索引擎用的爬虫系统。一.目标：爬取所有网站的网页下载下来，存放到本地服务器里形成备份。 二.抓取流程：a.首选选取一部分已有的url,把这些url放到待爬取队列。b.从队列里取出这些URL，然后解析DNS得到 阅读全文
posted @ 2019-12-27 00:18
故事的小黄花丶
阅读(185)
评论(0)
推荐(0)
浙公网安备 33010602011771号