上一页 1 ··· 6 7 8 9 10 11 下一页
摘要: 声明: 1)仅作为个人学习,如有冒犯,告知速删! 2)不想误导,如有错误,不吝指教! 本节内容: 简介 文件存储 TXT文本存储 JSON文件存储 CSV文件存储 关系型数据库 MySQL存储 非关系数据库 Mongodb redis 一 简单介绍: 我们前面很少将提取的数据或者获取的源码保存下来; 阅读全文
posted @ 2020-06-16 15:18 xbhog 阅读(6476) 评论(2) 推荐(0) 编辑
摘要: 不想误导,若有错误,希望各位不吝指教!! 代理:proxies参数 格式: 1 proxies = { 2 "http": "http://12.34.56.79:9527", 3 "https": "http://12.34.56.79:9527", 4 } 私密代理: 1 # 如果代理需要使用H 阅读全文
posted @ 2020-06-11 10:09 xbhog 阅读(263) 评论(0) 推荐(0) 编辑
摘要: 本节内容 模块的安装 基础用法 GET用法、POST用法 进阶用法 cookie处理、代理ip、session 一 模块安装: 1). 安装requests包还是很方便的,电脑中有python环境,打开cmd,输入pip install requests下载; 如果有同学使用pycharm的话,选择 阅读全文
posted @ 2019-11-01 17:32 xbhog 阅读(703) 评论(2) 推荐(0) 编辑
摘要: 题目:给定两个数组,编写一个函数来计算它们的交集。 示例 1: 示例 2: 说明: 输出结果中的每个元素一定是唯一的。 我们可以不考虑输出结果的顺序。 输出结果中的每个元素一定是唯一的。 我们可以不考虑输出结果的顺序。 首先说一下我自己的(菜鸡)思路:我先是想先去重第第一个数组(nums1),然后循 阅读全文
posted @ 2019-10-26 22:36 xbhog 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 题目:给定两个字符串 s 和 t ,编写一个函数来判断 t 是否是 s 的字母异位词(python语言)。 1 示例 1: 2 3 输入: s = "anagram", t = "nagaram" 4 输出: true 5 示例 2: 6 7 输入: s = "rat", t = "car" 8 输 阅读全文
posted @ 2019-10-26 22:34 xbhog 阅读(199) 评论(0) 推荐(0) 编辑
摘要: 最近哪吒大火,所以我们分析一波哪吒的影评信息,分析之前我们需要数据呀,所以开篇我们先讲一下爬虫的数据提取;话不多说,走着。 首先我们找到网站的url = "https://maoyan.com/films/1211270",找到评论区看看网友的吐槽,如下 阅读全文
posted @ 2019-10-26 22:29 xbhog 阅读(615) 评论(3) 推荐(0) 编辑
摘要: 今天制作一个优美库图片小程序,网址http://www.umei.cc/bizhitupian/, 爬虫的相关流程:获取目标网址-获取数据-存储数据。下面是该网页的内容: 第一步:找到该网站下的便签,找到该标签网页下所有的url,这里的思路是获取该标签下的页数,通过循环拼接所有的url。 对电脑壁纸 阅读全文
posted @ 2019-10-26 22:23 xbhog 阅读(585) 评论(0) 推荐(0) 编辑
摘要: 今天分析一波蜂鸟网,话不多说,先来一波网址,url =“ http://image.fengniao.com/index.php#p=1”,首先一个美女图片瞧瞧, 分析一波网页,找到网站的分页特点,该网站请求方式为ajax请求,那么各位看官瞧仔细了,F12打开,鼠标轱辘往下翻,你会发现: 有什么发现 阅读全文
posted @ 2019-10-26 22:13 xbhog 阅读(346) 评论(0) 推荐(0) 编辑
摘要: 这是爬虫的第一部分,对于python基础与网络编程部分重点突出,主要以每次小项目为主;更新时间不定,随缘之人,缘分到了,文章就出来了。 简单说下这次练手的小东西想法:在暑假的时候,看见自己的电脑壁纸有点。。。。,LOW,所以想着做一个WIN下的壁纸切换小程序。这次只是图片提取部分,话不多说来看看代码 阅读全文
posted @ 2019-10-26 22:08 xbhog 阅读(344) 评论(0) 推荐(0) 编辑
摘要: 今天我们来盘一下csdn,做一个小程序,为什么做这个呢?今天小编看着我的博客的阅读数,唉,惨不忍睹,没办法,只能想一些........呃呃呃呃,你懂的。 话不多说,分析一波csdn的阅读数,计数原理是每次进入页面记作一次,所以我们很简单的构建一个访问的小爬虫就好了,那么开始操作。 根据上面的代码,你 阅读全文
posted @ 2019-10-26 21:59 xbhog 阅读(1336) 评论(6) 推荐(1) 编辑
上一页 1 ··· 6 7 8 9 10 11 下一页