I'm_江河湖海

摘要：是否了解线程的同步和异步？线程同步：多个线程同时访问同一资源，等待资源访问结束，浪费时间，效率低线程异步：在访问资源时在空闲等待时同时访问其他资源，实现多线程机制是否了解网络的同步和异步？同步：提交请求->等待服务器处理->处... 阅读全文

摘要：变量是拥有匹配对象的名字（标识符）。命名空间是一个包含了变量名称们（键）和它们各自相应的对象们（值）的字典。一个Python表达式可以访问局部命名空间和全局命名空间里的变量。如果一个局部变量和一个全局变量重名，则局部变量会覆盖全局变量。每个函数都有自己的命... 阅读全文

摘要：我要把爬虫的终极利器介绍一下，这个只要是我们肉眼能看到的，就算在源码中或者在json中，或是post也无法得到的数据，我们都可以获取到，雷同F12后源码暴露在你面前一样！这次需要用到selenium家族的一些成员，它们各司其职，各个身怀绝技。先介绍一下se... 阅读全文

摘要：直接入正题---Python selenium自动控制浏览器对网页的数据进行抓取，其中包含按钮点击、跳转页面、搜索框的输入、页面的价值数据存储、mongodb自动id标识等等等。 1、首先介绍一下 Python selenium ---自动化测试工具，用来控制... 阅读全文

摘要：可能在学习爬虫的时候，遇到很多的反爬的手段，封ip 就是其中之一。对于封IP的网站。需要很多的代理IP，去买代理IP，对于初学者觉得没有必要，每个卖代理IP的网站有的提供了免费IP，可是又很少，写了个IP代理池。学习应该就够了 ip代理池： ... 阅读全文

摘要： Django 是用Python开发的一个免费开源的Web框架，可以用于快速搭建高性能，优雅的网站！采用了MVC的框架模式，即模型M，视图V和控制器C，也可以称为MVT模式，模型M，视图V，模板T。在学习Django的过程中将学到的知识进行总结分享出来，温故而知... 阅读全文