摘要：在之前的文章体系中介绍了lxml在网络爬虫的应用，它的速度并不是那么的快，主要是使用xpath的方式 获取到想要的信息，然后进行解析和处理。今天主要介绍beautifulsoup在网络爬虫的应用，比起lxml的应用， 它的应用更加速度，获取想要的数据更加高效。要使用它的时候，首先需要安装它，安装的命 阅读全文

摘要：数据存储也是网络爬虫的一部分，获取到的数据可以存储到本地的文件如CSV，EXCEL，TXT等文件，当然也是可以存储到 mongodb,MySQL等数据库。存储的目的是为了获取数据后，对数据进行分析，和依据数据的基础上得出一个结论或者得到一个信 息。真实的世界充满了太多的不确定性，如何能够让自己的决策 阅读全文

摘要：网络爬虫顾明思议就是从互联网中获取数据，然后对这些数据进行处理，然后让数据成为自己 想要的部分，比如分析2019年自动化测试工程师的薪资情况到底是怎么样的，可以获取到招聘平台 所有自动化测试招聘的薪资范围，然后对薪资做一个排名分析，当然事情做起来并不是说的这样简单 的。在Python的网络爬虫中，从 阅读全文