上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 56 下一页
摘要: 比如我们说月活,我们理所当然指的是,这个月内有过行为的用户,而不是指这个月内每天都要有行为的用户了。 user_id, active_date 0001 2022-11-11 0002 2022-11-12 你之所以迷惑就是有两个概念没定义好: 一个是第N日,一个是N日内。 第七日和七日内很明显覆盖 阅读全文
posted @ 2022-11-16 22:44 叶常落 阅读(22) 评论(0) 推荐(0)
摘要: 今日遇到一个分摊场景,例如 // todo id, start_time, end_time, pay_amount, months,这是一条数据,现在需要根据规则,把这条数据拆分成多条数据,也就是平均到每个月上面。如果写sql该如何实现呢? 例如这里根据12/3 再生成4条数据要如何实现? 假如可 阅读全文
posted @ 2022-11-14 22:59 叶常落 阅读(18) 评论(0) 推荐(0)
摘要: 吃一堑长一智。先说重点,教训和收获,核心数据一定要自己托管,别轻信第三方。 今天发现我的小程序没有数据了,只剩下页面壳子还能用,数据统统没有了。 后来看到了如下公告: 但是我的数据库的数据已经被清理了。 阅读全文
posted @ 2022-11-05 23:56 叶常落 阅读(14) 评论(0) 推荐(0)
摘要: todo 草稿 背景: 如果有这样的需求: 你需要把mysql某个表中的数据实时同步到kafka。 你需要把mysql某个表的数据实时同步到hive。 概念学习 sdc: streamsets data collector cdc: change data capture cdh: Cloudera 阅读全文
posted @ 2022-11-05 20:40 叶常落 阅读(39) 评论(0) 推荐(0)
摘要: 以日期进行分区dt字段 站在测试视角,非常容易发现的一个问题,但是遇到一个问题 凌晨附近的数据所在的分区不是数据的日期, 例如2022-11-03 23:59:59.888的数据存放到了2022-11-04的分区中。这是什么原理呢? 这个概念可能叫做数据漂移 阅读全文
posted @ 2022-11-04 21:07 叶常落 阅读(11) 评论(0) 推荐(0)
摘要: 软件测试金字塔 数仓分层金字塔: 不同公司可能不近相同,大同小异吧。 阅读全文
posted @ 2022-11-01 23:34 叶常落 阅读(14) 评论(0) 推荐(0)
摘要: 概念: sqoop 我的问题 具体是怎么执行的?难道是定时调用命令行执行吗? sqoop增量和全量 全量比较容易理解,增量怎么搞呢? Apache Sqoop™ is a tool designed for efficiently transferring bulk data between Apa 阅读全文
posted @ 2022-11-01 22:33 叶常落 阅读(10) 评论(0) 推荐(0)
摘要: 1、想象这个场景,把百度统计的前端sdk交给你来测试,你应该如何保证质量呢? <script> var _hmt = _hmt || []; (function() { var hm = document.createElement("script"); hm.src = "//hm.baidu.c 阅读全文
posted @ 2022-10-31 19:57 叶常落 阅读(7) 评论(0) 推荐(0)
摘要: 最近有遇到到iframe的相关内容: top vs parent top和parent的区别 很好理解,top代表着最顶层,最外层,parent代表着上一层。 当然了top和parent有可能指向同一层 the Parent is the parent window. top is top the 阅读全文
posted @ 2022-10-24 20:02 叶常落 阅读(19) 评论(0) 推荐(0)
摘要: 20220829 display: flex 1、modal弹窗: 2、侧边栏抽屉: 为什么直接通过js添加class无法触发transition? 为什么要设置一个延时动效才生效? 1、弹窗: position:fixed width: 100%; height:100% display: non 阅读全文
posted @ 2022-08-29 23:39 叶常落 阅读(13) 评论(0) 推荐(0)
上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 56 下一页