摘要: --当天的0点0分0秒,当天的23点59分59秒 select convert(datetime,convert(varchar(10),getdate(),120)) as a, dateadd(ss,-1,dateadd(dd,1,convert(datetime,convert(varchar 阅读全文
posted @ 2025-12-02 08:55 每天进步多一点 阅读(1) 评论(0) 推荐(0)
摘要: 数据抽取是指从源数据源系统抽取需要的数据。实际应用中,数据源较多采用的是关系数据库。总体而言,数据抽取的常见方法有两大类,一是基于查询式的,一是基于日志的。 基于查询式的数据抽取 基于查询式的数据抽取,顾名思义,以从来源库来源表查询数据为主。总体又有几种:触发器方式,增量字段方式,时间戳方式等等。 阅读全文
posted @ 2025-11-29 09:32 每天进步多一点 阅读(5) 评论(0) 推荐(0)
摘要: ETL的过程 1、数据抽取:确定数据源,定义数据接口,选择数据抽取方法(主动抽取或由源系统推送)。2、数据清洗:处理不完整数据、错误数据、重复数据等,确保数据的准确性和一致性。(是数据转换的一部分)3、数据转换:进行空值处理、数据标准统一、数据拆分、数据验证、数据替换和数据关联等操作。4、规则检查: 阅读全文
posted @ 2025-11-29 09:24 每天进步多一点 阅读(10) 评论(0) 推荐(0)
摘要: 取得当天0时0分0秒和23时59分59秒 --MYSQL SELECT DATE_FORMAT(SYSDATE(), '%Y-%m-%d 23:59:59') FROM DUAL; SELECT DATE_FORMAT(SYSDATE(), '%Y-%m-%d 00:00:00') FROM DAU 阅读全文
posted @ 2025-11-29 09:03 每天进步多一点 阅读(3) 评论(0) 推荐(0)
摘要: 数据库运维需要掌握的技能之一数据库的迁移,而MySQL数据库是我们常用的数据库之一,掌握mysql 数据库的数据迁移,也是必备的技能选项。数据库的迁移,我们必须要思考如下几个点: 需要迁移数据库的数据量大小 需要迁移的数据库对象是什么, 考虑使用何种迁移方法! 这三个思考要点,适合于所用的数据库迁移 阅读全文
posted @ 2025-11-29 08:56 每天进步多一点 阅读(33) 评论(0) 推荐(0)
摘要: 在MySQL数据库中,JSON格式的数据处理已经变得越来越常见。JSON(JavaScript Object Notation)是一种轻量级的数据交换格式,它可以用来存储和表示结构化的数据。MySQL提供了一些功能强大的JSON函数,其中两个关键的函数是JSON_ARRAYAGG和JSON_OBJE 阅读全文
posted @ 2025-11-28 19:40 每天进步多一点 阅读(13) 评论(0) 推荐(0)
摘要: 1、IFNULL() 函数 MySQL IFNULL 函数是 MySQL 控制流函数之一。 它有两个参数,第一个参数不为 NULL 时返回。 否则,IFNULL 函数返回第二个参数。 这两个参数可以是文字值或表达式。 IFNULL(expression1,expression2); 如果 expre 阅读全文
posted @ 2025-11-28 19:32 每天进步多一点 阅读(66) 评论(0) 推荐(0)
摘要: EXPLAIN 工具能用于获取查询执行计划,即分析 MySQL 如何执行一个 SQL 语句。我们可以通过使用EXPLAIN 去模拟优化器执行 SQL 语句,从而分析 SQL 语句有没有使用索引、是否采用全表扫描方式、判断能否更进一步优化等。我们可以根据EXPLAIN 输出的数据来分析如何优化查询语句 阅读全文
posted @ 2025-10-31 23:32 每天进步多一点 阅读(21) 评论(0) 推荐(0)
摘要: 查看执行时间1 show profiles;2 show variables;查看profiling 是否是on状态;3 如果是off,则 set profiling = 1;4 执行自己的sql语句;5 show profiles;就可以查到sql语句的执行时间; 查看操作了多少行在sql语句前面 阅读全文
posted @ 2025-10-31 23:17 每天进步多一点 阅读(41) 评论(0) 推荐(0)
摘要: 1、今天 select * from 表名 where to_days(时间字段名) = to_days(now()) 2、昨天 select * from 表名 where to_days( now( ) ) - to_days( 时间字段名) <= 1 3、近7天 select * from 表 阅读全文
posted @ 2025-10-31 20:23 每天进步多一点 阅读(43) 评论(0) 推荐(0)