摘要:继续答水友提问。问题抽象:(1)用户会员系统;(2)用户会有分数流水,每个月要做一次分数统计,对不同分数等级的会员做不同业务处理; 数据假设: (1)假设用户在100w级别; (2)假设用户日均1条流水,也就是说日增流水数据量在100W级别,月新增流水在3kW级别,3个月流水数据量在亿级别; 常见解 阅读全文
posted @ 2019-08-17 07:00 都市烟火 阅读 (54) 评论 (0) 编辑
摘要:证券交易系统是金融市场上能够提供的最有流动性,效率最高的交易场所。 和传统的商品交易不同的是,证券交易系统提供的买卖标的物是标准的数字化资产,如USD、股票、BTC等,它们的特点是数字计价,可分割买卖。 证券交易系统通过买卖双方各自的报价,按照价格优先、时间优先的顺序,对买卖双方进行撮合,实现每秒成 阅读全文
posted @ 2019-02-15 14:09 都市烟火 阅读 (152) 评论 (0) 编辑
摘要:前言:“客户端上传时间戳”的玩法,你玩过么?一起聊聊时间戳的奇技淫巧!,其实这个类似于数据版本号的东西。 缘起:无线时代,流量敏感。APP在登录后,往往要向服务器同步非常多的数据,很费流量,技术上有没有节省流量的方法呢?这是本文要讨论的问题。 问题一:APP登录时需要拉取什么数据?答:APP登陆时, 阅读全文
posted @ 2018-09-30 11:57 都市烟火 阅读 (82) 评论 (0) 编辑
摘要:延迟任务有别于定式任务,定式任务往往是固定周期的,有明确的触发时间。而延迟任务一般没有固定的开始时间,它常常是由一个事件触发的,而在这个事件触发之后的一段时间内触发另一个事件。延迟任务相关的业务场景如下: 场景一:物联网系统经常会遇到向终端下发命令,如果命令一段时间没有应答,就需要设置成超时。 场景 阅读全文
posted @ 2018-07-26 23:12 都市烟火 阅读 (157) 评论 (0) 编辑
摘要:puppeteer安装以及遇到的坑 1. 环境和安装 Puppeteer 至少需要 Node v6.4.0,如要使用 async / await,只有 Node v7.6.0 或更高版本才支持。 node下载地址: https://nodejs.org/zh-cn/ 2. 创建项目 在安装的过程中遇 阅读全文
posted @ 2018-07-16 19:06 都市烟火 阅读 (2963) 评论 (0) 编辑
摘要:tcpdump 命令使用简介 简单介绍 tcpdump 是一款强大的网络抓包工具,运行在 linux 平台上。熟悉 tcpdump 的使用能够帮助你分析、调试网络数据。 要想使用很好地掌握 tcpdump, 必须对网络报文(TCP/IP 协议)有一定的了解。不过对于简单的使用来说,只要有网络基础概念 阅读全文
posted @ 2018-04-22 22:49 都市烟火 阅读 (461) 评论 (0) 编辑
摘要:转自:https://cnodejs.org/topic/58fd8ec7523b9d0956dad945 koa是由express原班人马打造的一个更小、更富有表现力、更健壮的web框架。 在我眼中,koa的确是比express轻量的多,koa给我的感觉更像是一个中间件框架,koa只是一个基础的架 阅读全文
posted @ 2018-03-08 00:09 都市烟火 阅读 (197) 评论 (0) 编辑
摘要:转自:https://mp.weixin.qq.com/s?__biz=MzI0MzQyMTYzOQ==&mid=2247483686&idx=1&sn=18dfa0fd08bcf7606443340245144ca0 Redis在互联网技术存储方面使用如此广泛,几乎所有的后端技术面试官都要在Red 阅读全文
posted @ 2018-03-07 23:56 都市烟火 阅读 (3324) 评论 (1) 编辑
摘要:一 Nginx的location语法 = 严格匹配。如果请求匹配这个location,那么将停止搜索并立即处理此请求 ~ 区分大小写匹配(可用正则表达式) ~* 不区分大小写匹配(可用正则表达式) !~ 区分大小写不匹配 !~* 不区分大小写不匹配 ^~ 如果把这个前缀用于一个常规字符串,那么告诉n 阅读全文
posted @ 2018-01-21 12:04 都市烟火 阅读 (17503) 评论 (0) 编辑
摘要:需求 万维网上有着无数的网页,包含着海量的信息,无孔不入、森罗万象。但很多时候,无论出于数据分析或产品需求,我们需要从某些网站,提取出我们感兴趣、有价值的内容,但是纵然是进化到21世纪的人类,依然只有两只手,一双眼,不可能去每一个网页去点去看,然后再复制粘贴。所以我们需要一种能自动获取网页内容并可以 阅读全文
posted @ 2017-12-28 22:36 都市烟火 阅读 (476) 评论 (0) 编辑