摘要：
1.爬虫三种分类: 通用爬虫:爬取整个页面的数据 聚焦爬虫:爬取经过筛选过滤后的数据,基于一张页面的局部内容. 增量式爬虫:爬虫监测网站更新后的数据, 2.什么是UA检测,如何破解? UA检测:服务器会用来通过获取请求,通过请求获取请求头中的UA,通过判定UA的值,知道请求的载体身份标识. 将爬虫程 阅读全文
posted @ 2019-05-28 18:09
studybrother
阅读(265)
评论(0)
推荐(0)
摘要：
1.requests安装的问题 (1)如果requests没有安装,我们需要先安装这个模块,在cmd安装不了,我们可以在下面的位置,打开的窗体安装requests模块 pip install requests (2)pip要升级注意一下: 2.requests模块&&urllib模块 (1)什么是r 阅读全文
posted @ 2019-05-27 18:04
studybrother
阅读(390)
评论(0)
推荐(0)
摘要：
1.jupyter的基本使用方式 两种模式:code和markdown (1)code模式可以直接编写py代码 (2)markdown可以直接进行样式的指定 (3)双击可以重新进行编辑 (4)快捷键总结: (5)ipynb文件相当于是放在缓存中,没有先后顺序.缓存机制 2.第二种打开anaconda 阅读全文
posted @ 2019-05-27 17:42
studybrother
阅读(696)
评论(0)
推荐(0)
摘要：
D1 1.开篇&&简单介绍启动:https://www.cnblogs.com/studybrother/p/10931343.html 2.jupyter简单使用&&爬虫相关概念:https://www.cnblogs.com/studybrother/p/10932034.html 3.requ 阅读全文
posted @ 2019-05-27 16:19
studybrother
阅读(155)
评论(0)
推荐(0)
摘要：
1.第一阶段的内容 2.学习的方法? 思考,总结,重复 3.长大了意味着什么?家庭的责任,真的很重 4.数据分析&&数据清洗 numpy&&pandas&&matplotlib 实例: 人口普查数据分析 政治献金 机器学习入门初步了解(识别手写的数字) 5.数据结构: 二叉树,矩阵,队列,栈,堆等等 阅读全文
posted @ 2019-05-27 16:18
studybrother
阅读(190)
评论(0)
推荐(0)
摘要：
01jupyter环境安装:https://www.cnblogs.com/bobo-zhang/p/10057504.html anaconda介绍\安装及使用:知乎:https://zhuanlan.zhihu.com/p/32925500 02python网络爬虫之http和https协议:h 阅读全文
posted @ 2019-05-27 15:27
studybrother
阅读(172)
评论(0)
推荐(0)
摘要：
1.精确查找和模糊查找(term和match的区别) match经过分析(analyer)的, term是不经过分词,直接去倒排索引中查找精确的值. 2.建议器的简介(最左前缀或者自带的做) (1)直接用现成的 (2)不只是纠错,还有建议等等. (3)优点:用户体验,服务器减少请求(减少压力,太耗电 阅读全文
posted @ 2019-05-25 22:42
studybrother
阅读(214)
评论(0)
推荐(0)
摘要：
1.验证是否成功安装django 上图证明安装成功 2.打开客户端的pycharm,在terminal中打开窗体,什么都没输入,运行下面的命令 python manage.py runserver 在浏览器中输入:127.0.0.1:8000 3.查看django的版本 阅读全文
posted @ 2019-05-23 08:37
studybrother
阅读(1761)
评论(0)
推荐(0)
摘要：
方法1:查看python版本 方法2:cmd框中查看的两种方式 阅读全文
posted @ 2019-05-23 08:26
studybrother
阅读(5616)
评论(0)
推荐(0)
摘要：
方法1: 方法2: 阅读全文
posted @ 2019-05-22 23:29
studybrother
阅读(313)
评论(0)
推荐(0)
浙公网安备 33010602011771号