摘要: 1.pip常用命令 显示模块的详情 pip show 安装模块 pip install 模块名称 卸载模块 pip uninstall 模块名称 查看当前环境所以安装的模块 pip list 2.cmd常用命令 显示当前文件夹下的所有的目录 : dir 跳转 : cd路径 注意:如果是跨盘跳,需要再 阅读全文
posted @ 2019-04-21 14:33 魔仙小丽丽 阅读(2382) 评论(0) 推荐(0)
摘要: 1.在python中矩阵用二维数组代替 导入模块 import numpy as np a=np.array([[1,2,3], [6,5,5], [5,6,3]]) print(a.shape)#(3,3)属性,是数组的行列 2.矩阵的计算 a1=np.array([[4,5,6],[1,2,3] 阅读全文
posted @ 2019-04-18 15:27 魔仙小丽丽 阅读(944) 评论(0) 推荐(0)
摘要: 1.创建爬虫: scrapy genspider爬虫名 域名 注意:爬虫的名字不能和项目名相同 2. scrapy list --展示爬虫应用列表 scrapy crawl爬虫应用名称 运行单独爬虫应用 使用scrapy框架爬取糗事百科段子: 使用命令创建一个爬虫: scrapy gensipder 阅读全文
posted @ 2019-04-17 16:59 魔仙小丽丽 阅读(726) 评论(0) 推荐(0)
摘要: 1.写一个爬虫,需要做很多事情。比如:发送网络请求,数据解析,数据存储,反扒虫虫机制(更换IP代理,设置请求头等),异步请求等。这些工作如果每次都要从零开始写的话,比较浪费时间。因此scrapy吧一些基础的东西封装好了,在他上面写爬虫可以变的更加高效(爬去效率和开发效率)。因此真正在公司里,一些上了 阅读全文
posted @ 2019-04-17 16:35 魔仙小丽丽 阅读(227) 评论(0) 推荐(0)
摘要: ①比较运算符: 等于:默认是等于判断,没有运算符 小于:$lt(less than) 小于等于:$lte(less than equal) 大于:$gt(greater than) 大于等于:$gte(greater than equal) 不等于:$ne(not equal) db.stu.fin 阅读全文
posted @ 2019-04-15 20:11 魔仙小丽丽 阅读(1930) 评论(0) 推荐(0)
摘要: 1.关系型和非关系型的介绍 relational 关系型 关系数据库很强大,但是他并不能很好的应付所有的应用场景。MySQL的扩展性查,大数据IO压力大,表结构更改困难 MongoDB 非关系型 易扩展,大数据量高性能,灵活的数据模型,高可用 2.mongodb的优势 ①易扩展:NoSQL数据库种类 阅读全文
posted @ 2019-04-15 19:11 魔仙小丽丽 阅读(182) 评论(0) 推荐(0)
摘要: 线程与进程的区别于联系进程:process 线程:thread进程的概念 进程是操作系统实现并发执行的重要手段,也是操作系统为程序提供的重要运行环境抽象。 进程最根本的属性是动态性和并发性。以下是从不同角度对进程的解释: a、进程是程序的一次执行 b、进程是可以与其他计算并发执行的计算 c、进程是一 阅读全文
posted @ 2019-03-25 14:32 魔仙小丽丽 阅读(141) 评论(0) 推荐(0)
摘要: 正则的基本语法1.正则需要导入模块 import re2.re.match匹配函数,从字符串的起始位置开始匹配,匹配成功就返回一个match对象,否则返回None3.语法:re.match(pattern, string, flags=0) Pattern:匹配的字符串 String: 需要被查找的 阅读全文
posted @ 2019-03-17 19:55 魔仙小丽丽 阅读(212) 评论(0) 推荐(0)