上一页 1 ··· 23 24 25 26 27 28 29 30 31 ··· 39 下一页
摘要: # 抓取梨视频网站的短视频 from lxml import etree import os import requests import re dirName="./videoLibs" if not os.path.exists(dirName): os.mkdir(dirName) url=" 阅读全文
posted @ 2020-05-08 00:06 佛祖让我来巡山 阅读(204) 评论(0) 推荐(0)
摘要: - selenium模块在爬虫中的使用 - 概念:是一个基于浏览器自动化的模块。 - 爬虫之间的关联: - 便捷的捕获到动态加载到的数据。(可见即可得) - 实现模拟登陆 - 环境安装:pip install selenium - 基本使用: - 准备好某一款浏览器的驱动程序:http://chro 阅读全文
posted @ 2020-05-08 00:04 佛祖让我来巡山 阅读(167) 评论(0) 推荐(0)
摘要: 1:强制类型转换数据溢出 2:顺序结构的流程图 3:单if语句的流程图 4:标准if-else语句的流程图 5:扩展if-else语句的流程图 6:for循环流程图 阅读全文
posted @ 2020-05-07 17:33 佛祖让我来巡山 阅读(419) 评论(0) 推荐(0)
摘要: requests抓取数据报错 - HttpConnectinPool: - 原因: - 1.短时间内发起了高频的请求导致ip被禁 - 2.http连接池中的连接资源被耗尽 - 解决: - 1.代理 - 2.headers中加入Conection:“close” 代理服务器 - 代理:代理服务器,可以 阅读全文
posted @ 2020-05-05 22:48 佛祖让我来巡山 阅读(440) 评论(0) 推荐(0)
摘要: 数据解析 - 数据解析 - 数据解析的作用: - 可以帮助我们实现聚焦爬虫 - 数据解析的实现方式: - 正则 - bs4 - xpath - pyquery - 数据解析的通用原理 - 问题1:聚焦爬虫爬取的数据是存储在哪里的? - 都被存储在了相关的标签之中and相关标签的属性中 - 1.定位标 阅读全文
posted @ 2020-05-05 12:25 佛祖让我来巡山 阅读(333) 评论(0) 推荐(0)
摘要: requests操作流程分析 - requests作用:模拟浏览器发起请求 - urllib:requests的前身 - requests模块的编码流程: - 指定url - 发起请求: - get(url,params,headers) - post(url,data,headers) - 获取响 阅读全文
posted @ 2020-05-04 16:15 佛祖让我来巡山 阅读(1460) 评论(0) 推荐(0)
摘要: 内存管理 与Python对象创建相关的结构体 #define _PyObject_HEAD_EXTRA \ struct _object *_ob_next; \ struct _object *_ob_prev; #define PyObject_HEAD PyObject ob_base; #d 阅读全文
posted @ 2020-05-03 22:35 佛祖让我来巡山 阅读(206) 评论(0) 推荐(0)
摘要: 冒泡排序 思路:从列表第一个元素开始,相邻两个相比较,如果前者比后者大,则交换,使最大的最终交换到列表末尾。 alist = [3, 5, 2, 4, 1, 9] def bubbleSort(alist): for i in range(0, len(alist) - 1): for j in r 阅读全文
posted @ 2020-05-02 16:43 佛祖让我来巡山 阅读(295) 评论(0) 推荐(0)
摘要: alist = [1, 2, 3, 4, 5, 6, 7, 8] def binarySearch(alist, target): first = 0 last = len(alist) - 1 while first <= last: middle_index = (first + last) / 阅读全文
posted @ 2020-05-02 15:01 佛祖让我来巡山 阅读(190) 评论(0) 推荐(0)
摘要: # coding:utf8 class Node(): def __init__(self, _item): self.item = _item self.left = None self.right = None class SortTree(): def __init__(self): self 阅读全文
posted @ 2020-05-02 13:06 佛祖让我来巡山 阅读(178) 评论(0) 推荐(0)
上一页 1 ··· 23 24 25 26 27 28 29 30 31 ··· 39 下一页

佛祖让我来巡山博客站 - 创建于 2018-08-15

开发工程师个人站,内容主要是网站开发方面的技术文章,大部分来自学习或工作,部分来源于网络,希望对大家有所帮助。

Bootstrap中文网