摘要: 1、MYSQL EXPLAIN https://blog.csdn.net/jiadajing267/article/details/81269067 2、普通索引VS唯一性索引 https://blog.csdn.net/w2298119289j/article/details/105383813 阅读全文
posted @ 2024-03-07 09:05 三两研几 阅读(2) 评论(0) 推荐(0) 编辑
摘要: # 001 Spark框架 1、spark 是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。 2、Spark VS Hadoop > 时间 Hadoop 2003(Yahoo开发)-> 2011(1.0) -> 2013(2.X) Spark 2009(伯克利大学)-> 2013(Apach 阅读全文
posted @ 2023-07-23 23:55 三两研几 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 索引 索引概述 索引,是帮助mysql高效获取数据的数据结构**(有序)**;在数据之外,数据库系统还维护着满足特定查找算法的数据结构,这些数据结构以某种方式引用(指向)数据,这样就可以在这些数据结构上实现高级查找算法,这种数据结构就是索引。 优缺点: 优点:提高数据检索的效率,降低数据库的IO成本 阅读全文
posted @ 2022-05-28 16:42 三两研几 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 惜时 岁月已往者不可复,未来者不可期,现在者不可失。 流水容易把人抛,红了樱桃,绿了芭蕉。 时间,每天得到的都是二十四小时,可是一天的时间给勤勉的人带来智慧与力量,给懒散的人只能留下一片悔恨。 我们感叹“生也有涯”,却活得好似“生也无涯”。 时间就像是海绵里的水,只要愿意挤,总还有的。 无端地空耗别 阅读全文
posted @ 2022-03-09 00:02 三两研几 阅读(186) 评论(0) 推荐(0) 编辑
摘要: 展开查看 风朗气晴,江山稳固! 阅读全文
posted @ 2022-02-23 11:05 三两研几 阅读(19) 评论(0) 推荐(0) 编辑
摘要: 架构 架构图 ETL ODS层 操作数据源层 DWD层 数据明细层 DWS层 数据汇总层 ADS层 数据应用层 建模方法 OLTP系统建模方法 阅读全文
posted @ 2022-02-22 22:19 三两研几 阅读(22) 评论(0) 推荐(0) 编辑
摘要: P35-44 【220221】 man man q 退出man 如果不记得命令名,可以使用 man -k 关键字; # 例如要查找关于终端的相关命令,可以输入 man -k terimal man手册,为每个内容区域分配了一个数字,从1-9 1 可执行程序或shell命令 2 系统调用 man工具提 阅读全文
posted @ 2022-02-22 07:56 三两研几 阅读(31) 评论(0) 推荐(0) 编辑
摘要: Python程序中复制、移动、改名和删除文件 - shutil.copy(source,destination) - shutil.copytree(source,destination) - shutil.move(src,dst) import shutil,os # shutil.copy(s 阅读全文
posted @ 2022-01-24 09:32 三两研几 阅读(82) 评论(0) 推荐(0) 编辑
摘要: import time time.time() # Unix纪元,1970年1月1日0点 至今 秒数 应用场景1:测量代码执行时间 1、自定义函数 2、调用函数前执行: startTime = time.time() 3、调佣函数后执行:endTime = time.time() 扩展场景:cPro 阅读全文
posted @ 2022-01-24 09:31 三两研几 阅读(32) 评论(0) 推荐(0) 编辑
摘要: 魔法命令 Ipython 的魔法命令,一个%作用于单行,而两个%%作用于整个cell,一个%默认可以不写 •常用魔法命令 whos 查看当前的变量空间 %reset –f 重置当前变量空间 %pwd 查看当前工作文件夹 %mkdir demo_test 产生新文件夹 %cd demo_test/ 进 阅读全文
posted @ 2022-01-20 21:39 三两研几 阅读(36) 评论(0) 推荐(0) 编辑