摘要: 学习爬虫有一段时间了,今天使用Scrapy框架将校花网的图片爬取到本地。Scrapy爬虫框架相对于使用requests库进行网页的爬取,拥有更高的性能。 Scrapy官方定义:Scrapy是用于抓取网站并提取结构化数据的应用程序框架,可用于广泛的有用应用程序,如数据挖掘,信息处理或历史存档。 建立S 阅读全文
posted @ 2017-10-22 23:01 Python学习者 阅读(3542) 评论(0) 推荐(3) 编辑
摘要: 1、Linux配置IP地址的方法 1.ifconfig命令临时配置IP地址 ifconfig命令:查看与配置网络状态命令 # 临时设置eth0网卡的IP地址与子网掩码 2.setup工具永久配置IP地址 红帽专有图形化工具setup设置IP地址 配置完成后需要重启网络服务,执行 service ne 阅读全文
posted @ 2017-10-20 23:07 Python学习者 阅读(434) 评论(0) 推荐(0) 编辑
摘要: 1、软件包管理简介 1.软件包分类 源码包 脚本安装包 二进制包(RPM包、系统默认包) 2.源码包 源码包的优点是: 开源,如果有足够的能力,可以修改源代码 可以自由选择所需要的功能 软件设计编译安装,所以更加适合自己的系统,更加稳定有效 卸载方便 源码包的缺点: 安装过程步骤较多,尤其是安装较大 阅读全文
posted @ 2017-10-15 22:53 Python学习者 阅读(977) 评论(4) 推荐(4) 编辑
摘要: 1、总线的基本概念 1.为什么要用总线? 冯诺依曼将计算机分为五部分:运算器、存储器、控制器、输入设备和输出设备。要将这些设备连接起来需要较多的通路。 2.总线 总线式连接各个部件的信息传输线,是各个部件共享的传输介质。 3.总线上信息的传送 串行:一次传输一位信号。 并行:传输距离较短, 4.总线 阅读全文
posted @ 2017-10-13 23:19 Python学习者 阅读(1830) 评论(0) 推荐(0) 编辑
摘要: Sublime安装 Sublime Text 是一个代码编辑器。Sublime Text是由程序员Jon Skinner于2008年1月份所开发出来,它最初被设计为一个具有丰富扩展功能的Vim。 Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还 阅读全文
posted @ 2017-10-09 22:44 Python学习者 阅读(766) 评论(0) 推荐(0) 编辑
摘要: regular expression / regex / RE 正则表达式是一个特殊的字符序列,它能帮助你方便的检查一个字符串是否与某种模式匹配。Python 自1.5版本起增加了re 模块,它提供 Perl 风格的正则表达式模式。re 模块使 Python 语言拥有全部的正则表达式功能。compi 阅读全文
posted @ 2017-10-01 22:48 Python学习者 阅读(5628) 评论(0) 推荐(3) 编辑
摘要: BeautifulSoup官方介绍: 官方网站:https://www.crummy.com/software/BeautifulSoup/ BeautifulSoup安装 在"C:\Windows\System32"中找到"cmd.exe",使用管理员身份运行,在命令行中输入:“pip insta 阅读全文
posted @ 2017-09-30 18:45 Python学习者 阅读(1636) 评论(1) 推荐(1) 编辑
摘要: Unix文件是以字节序列组成的信息载体(container),内核不解释文件的内容。 Linux文件系统中的文件是数据的集合,文件系统不仅包含着文件中的数据而且还有系统的结构,所有Linux用户和程序看到的文件、目录、软链接及文件保护信息等都存储在其中。 Linux最早的文件系统是Minux,但是专 阅读全文
posted @ 2017-09-27 12:00 Python学习者 阅读(990) 评论(0) 推荐(0) 编辑
摘要: 1、XML概述 1.1、什么是XML XML全称为Extensible Markup Language,意思是可扩展的标记语言,它是SGML(标准通用标记语言)的一个子集。 XML语法上和HTML比较相似,但HTML中的元素是固定的,而XML的标签是可以由用户自定义的。 XML 的设计宗旨是传输数据 阅读全文
posted @ 2017-09-01 17:34 Python学习者 阅读(414) 评论(0) 推荐(0) 编辑
摘要: JSON是行业内使用最为广泛的数据交换格式,在很多场景都有广泛的应用。JSON适用于进行数据交互的场景,典型的是Ajax中实现异步加载;为了支持跨平台、数据安全等的Web Service也可以使用(API接口返回值)。 JSON(JavaScript Object Notation)是一种完全独立于 阅读全文
posted @ 2017-08-30 23:36 Python学习者 阅读(908) 评论(2) 推荐(0) 编辑