08 2018 档案
摘要:感觉多线程和phantomjs 不够完善·,想多写一些判断,和反爬措施。
阅读全文
摘要:selenium安装 sudo apt install selenium phantomjs安装 sudo apt-get install phantomjs 检查是否正常工作,输入以下命令: selenium --version phantomjs --version 若显示当前版本号,则 Pha
阅读全文
摘要:这是python里面的一个useragent池,非常好用!具体怎么用呢? 首先,安装fake-useragent pip install fake-useragent 然后,使用方法 注意,有些网站可能会根据user-agent来封IP,也就是说他们会根据同一个IP下,如果是很多个不同user-ag
阅读全文
摘要:使用MongoDB一段时间的同学肯定会发现,MongoDB往往会占用比实际数据大小多不少空间的问题。 如果利用db.stats()命令去查看,会发现MongoDB会报告几种不同的空间大小信息,如dataSize, storageSize以及fileSize。这些大小到底指的是什么意思呢?让我们来通过
阅读全文
摘要:本博文介绍了MongoDB,并详细指引读者在Ubuntu下MongoDB的安装和使用。本教程在Ubuntu14.04下测试通过。 一、MongoDB介绍 MongoDB 是一个是一个基于分布式文件存储的数据库,介于关系数据库和非关系数据库之间,是非关系数据库当中功能最丰富,最像关系数据库的。他支持的
阅读全文

浙公网安备 33010602011771号