摘要: 在开始之前先说几个scrapy运行的方式 1、常用的命令行形式的运行方式: scrapy crawl spider_name 这种方式可以根据爬虫名进行项目的运行 2、通过CrawlerProcess方式来执行 from scrapy.crawler import CrawlerProcess fr 阅读全文
posted @ 2019-11-07 17:24 drealAll 阅读(1598) 评论(0) 推荐(0)
摘要: 安装scrapy:pip install scrapy 创建项目:scrapy startproject name 创建爬虫:scrapy genspider name [域名] 运行爬虫:scrapy crawl name 阅读全文
posted @ 2019-11-06 18:41 drealAll 阅读(178) 评论(0) 推荐(0)
摘要: 1、计算机网络的定义 计算机网络:用通讯线路将分散在不同地点的具有独立自主的计算机系统相互连接,并按网络协议进行数据通讯和实现资源共享的计算机集合。 通讯线路:双绞线、同轴电缆(粗、细)、光纤、微波、通讯卫星、红外线和激光等。 不同地点:各计算机所在的地理位置的差异,将他们连起来就形成了“网”,并依 阅读全文
posted @ 2019-11-04 15:39 drealAll 阅读(929) 评论(0) 推荐(0)
摘要: Python PEP8规范 PEP8是Python的编码规范,其中心在于提高代码的可读性,遵循一个合理的规范,能提高维护,开发 1. 代码布局: 1) 缩进:每一级缩进使用4个空格(不能空格和tab键混用) 2) 换行首选括号,再是反斜杠。换行点在操作符后敲回车 3) 所有行限制的最大字符数为79, 阅读全文
posted @ 2019-11-04 12:08 drealAll 阅读(1067) 评论(0) 推荐(0)