程序猿老高

摘要： 有时候安装一些依赖包，网速慢，直接超时，可以指定国内源镜像。 pip install -i 国内镜像地址 包名 例如： pip install -i https://mirrors.aliyun.com/pypi/simple/ numpy 国内常用源镜像地址： 清华：https://pypi.tu 阅读全文

摘要： Scrapy框架介绍 Scrapy框架是一个基于Twisted框架开发而来，Twisted是一个流行的事件驱动的Python网络框架，所有Scrapy框架使用了一种非阻塞(又名异步)的代码来实现并发。 是纯Python实现的爬虫框架，它的结构清晰，模块之间的耦合程度低，可扩展性极强，可以灵活的完成各 阅读全文