2023年1月12日

pyspark

摘要: ##spark 用于大规模数据处理的统一(适用面广)分析引擎(数据处理)。 ###RDD:弹性分布式数据集。 rdd是一种分布式内存抽象,能够在大规模集群中做内存运算,并且有一定的容错方式。 ####spark 特点: 对任意类型的数据进行自定义计算。 spark 可以计算: 结构化,半结构化,非结 阅读全文

posted @ 2023-01-12 23:17 xm微微一笑 阅读(206) 评论(0) 推荐(0) 编辑

2022年11月12日

opencv 图像处理

摘要: 255代表白色 0代表黑色 ####基本语法 def read_demo(): image = cv.imread('C:/Users/Administrator/Pictures/Camera Roll/1.jpg') cv.imshow('input',image) cv.waitKey(0) 阅读全文

posted @ 2022-11-12 13:59 xm微微一笑 阅读(58) 评论(0) 推荐(0) 编辑

2020年8月18日

爬虫

摘要: 数据分析三剑客: 概念:是把隐藏在一些看似杂乱无章的数据背后的信息提炼出来,总结出所研究对象的内在规律 Numpy 支持大量的维度数组与矩阵运算, Pandas 处理数据丢失, Matplotlib 是回值曲线图的, **requests模块 ** text字符串形式的响应数据 json conte 阅读全文

posted @ 2020-08-18 20:01 xm微微一笑 阅读(126) 评论(0) 推荐(0) 编辑

2020年3月12日

算法

摘要: Lowb三人组: 冒泡排序,选择排序,插入排序 时间复杂度,(短):选择跟插入排序差不多,都比冒泡快 冒泡排序(两个相邻元素作比较,值小,交换) O(n2) 思路: 需要n-1趟 每一趟把无序区每两个相邻元素是大小关系交换 第i趟:有序区有i个数,无序区的范围:[0,n-i-1] Import ra 阅读全文

posted @ 2020-03-12 10:46 xm微微一笑 阅读(62) 评论(0) 推荐(0) 编辑

Flask

摘要: Flask 区别ResponseRequest上传文件装饰器 路由参数配置 BlueprintSession上下文管理流程 MongoDB MUI Sqlalchemy Django 优势: 相对主流框架,功能组件全 教科书式框架 劣势: 服务资源浪费 开发繁琐 重量级的web框架,开发效率高,MT 阅读全文

posted @ 2020-03-12 10:44 xm微微一笑 阅读(168) 评论(0) 推荐(0) 编辑

2020年3月5日

linux

摘要: 计算机相关 linux linux的发行版远程登录 常用的基础命令vim编辑器tar 解压缩 dns * Virtualenv 虚拟环境 * nginx 负载均衡supervisor * Redis redis 持久化 * Docker * dockerfile * rabbitmq 作用ACK 机 阅读全文

posted @ 2020-03-05 17:26 xm微微一笑 阅读(131) 评论(0) 推荐(0) 编辑

django 视图

摘要: * 视图 CBV和FBVrequest上传文件response分组 * admin的使用 * ORM模型 必知必会13条单表的双下划线外键的操作多对多aggregateF和Q * 事务 * cookie * session * 中间件 csrf相关的装饰器csrf中间件步骤ajax * form组件 阅读全文

posted @ 2020-03-05 17:19 xm微微一笑 阅读(92) 评论(0) 推荐(0) 编辑

Django 模板

摘要: HTTP/1.1 8种请求状态码三件套 django的使用 如何使用django使用mysql数据库 MVC 和 MTV 模板 变量Filters过滤器自定义filter HTTP/1.1 超文本传输协议(英文:Hyper Text Transfer Protocol,HTTP 1.定义: HTTP 阅读全文

posted @ 2020-03-05 17:01 xm微微一笑 阅读(87) 评论(0) 推荐(0) 编辑

数据库

摘要: 概念 导入 导出 存储引擎 基础数据类型 外键 数据的增删改查 单表查询 * 多表查询 * 索引 * python 操作数据库 * mysql主从复制 * 总结 面试题 https://blog.csdn.net/liu_weiliang10405/article/details/123930244 阅读全文

posted @ 2020-03-05 16:58 xm微微一笑 阅读(93) 评论(0) 推荐(0) 编辑

进程

摘要: 进程 线程 协成 总结 处理高并发 https://blog.csdn.net/weixin_37988176/article/details/109376554 Python怎么处理高并发? 使用协程, 事件循环, 高效IO模型(比如多路复用,比如epoll), 三者缺一不可。 进程 程序: 应用 阅读全文

posted @ 2020-03-05 14:45 xm微微一笑 阅读(112) 评论(0) 推荐(0) 编辑

导航