摘要：一开始我们默认都是只有一个爬虫的,所以执行的代码都是在项目下创建一个py文件 但是要执行多个爬虫就犯难了,在这里我只是做个笔记加强记忆 原博客 https://www.cnblogs.com/lei0213/p/7900340.html 其中执行以下: 1、在spiders同级创建任意目录，如：co 阅读全文

摘要：crontab在liunx系统中下载,我默认是认为下载安装了的.. crontab貌似只能在liunx系统中存在,如果是windows系统我不知道 创建一个名为jiaoben的文件夹存储sh文件,进入 vim 打开一个文件,没有则创建 后缀为.sh 编辑文本 保存文本,增加权限让crontab可以执 阅读全文

摘要：前言 第一次发到博客上..不太会排版见谅 最近在看一些爬虫教学的视频,有感而发,大学的时候看盗版小说网站觉得很能赚钱,心想自己也要搞个,正好想爬点小说能不能试试做个网站(网站搭建啥的都不会...) 站点拥有的全部小说不全,只能使用crawl爬全站 不过写完之后发现用scrapy爬的也没request 阅读全文