2017年12月22日
数据教训 有计划地且按时按量地产生（更新）数据
摘要： 不能粗放式产生数据和更新数据 必须有计划地且按时按量地产生和更新数据 控制数据的产生（更新，“更新”即“产生”了数据），才能从之后动态数据转化成的静态数据中进行数据挖掘，导向决策 data decision 阅读全文
posted @ 2017-12-22 20:56 papering 阅读(159) 评论(0) 推荐(0)
sql 语法树 常量
摘要： SELECT id,'|',url,'|',update_time FROM tab LIMIT 10;SELECT COUNT(1) AS parent,(SELECT COUNT(1) FROM tab WHERE id%2=0) AS child FROM tab; 阅读全文
posted @ 2017-12-22 16:59 papering 阅读(499) 评论(0) 推荐(0)
定时任务 bash 对远程数据库 备份 读写
摘要： 1g表 每行都有可能被更新，故全表备份 检测备份是否在进行 [root@hadoop1 ~]# netstat --numeric-ports | grep 3306tcp 0 0 hadoop1:37692 121.110.203.226:3306 ESTABLISHED您在 /var/spool 阅读全文
posted @ 2017-12-22 16:30 papering 阅读(416) 评论(0) 推荐(0)
监控脚本更新数据结果 要求当前小时更新的数据 所分布的产生时间
摘要： SELECT COUNT(1),FROM_UNIXTIME(update_time,'%Y%m%d %H') AS h, FROM_UNIXTIME(create_time,'%Y%m%d') AS d FROM test_url GROUP BY h,d ORDER BY h DESC ; 阅读全文
posted @ 2017-12-22 15:05 papering 阅读(362) 评论(0) 推荐(0)
利用一切可以利用的资源 去解决问题 完成难以想象的任务
摘要： 去解决问题 干 阅读全文
posted @ 2017-12-22 12:48 papering 阅读(301) 评论(0) 推荐(0)
面向数据的编程 面向数据的决策
摘要： 面向数据 阅读全文
posted @ 2017-12-22 10:50 papering 阅读(140) 评论(0) 推荐(0)
整洁的架构
摘要： 小结: 1、User Case 用例是架构设计中非常重要的一环，架构也是基于这些用例进行设计的，如果缺失了用例，就无从谈起架构设计了。 一文读懂架构整洁之道 https://mp.weixin.qq.com/s/XAm1MO4RQYtkj3ay-2jT7A 一文读懂架构整洁之道 原创 马飞翔（泽畔） 阅读全文
posted @ 2017-12-22 10:44 papering 阅读(350) 评论(0) 推荐(0)