摘要:EffectiveAkka-第一章的翻译。仅供学习参考,勿作他用。有翻译不正确的地方,请留言指正 阅读全文
posted @ 2018-03-01 10:09 gabry.wu 阅读 (201) 评论 (0) 编辑
摘要:在之前的akka设计模式系列-消息模型中,我们介绍了akka的消息设计方案,但随着实践的深入,发现了一些问题,这里重新梳理一下设计方法,避免之前的错误、不当的观点给大家带来误解。 阅读全文
posted @ 2019-10-23 16:21 gabry.wu 阅读 (26) 评论 (0) 编辑
摘要:在编译CDH版本的各个开源软件时,需要从cdh-repo下载对应的jar包,但发现下载速度非常慢,甚至有时候出现下载异常的情况。 下面是国内可用的、速度非常快的一个maven代理仓库,亲测可用: https://repo.rdc.aliyun.com/repository/82963-release 阅读全文
posted @ 2019-08-06 21:20 gabry.wu 阅读 (117) 评论 (0) 编辑
摘要:背景: 随着微服务的盛行,做开发时不可避免的要涉及第三方接口,安全起见,这些接口都会需要一个token参数。而token一般都会有一个过期时间,比如2小时或者30分钟。那么如何在自己的应用中存储并管理这些token呢? 常见方案: 内存缓存;第三方缓存 我们一般都会给每个第三方设置一个过期时间参数, 阅读全文
posted @ 2019-06-10 16:27 gabry.wu 阅读 (176) 评论 (0) 编辑
摘要:本文介绍Phoenix在2345公司的实践,主要是实时查询平台的背景、难点、Phoenix解决的问题、Phoenix-Sql的优化以及Phoenix与实时数仓的融合思路 阅读全文
posted @ 2019-06-06 15:03 gabry.wu 阅读 (126) 评论 (0) 编辑
摘要:MongoDB集群跨网络、跨集群数据同步有以下几个方案,此处只是简单介绍,不过详细描述。 1、MongoDB自带的复制方案 优点:实施简单,不需要额外的技术栈 缺点:网络双向可连通。 2、CDC同步方案1 该方案在源集群部署CDC,读取源集群的oplog,将数据写入目标集群。 优点:支持异构同步,即 阅读全文
posted @ 2019-06-05 15:32 gabry.wu 阅读 (55) 评论 (0) 编辑
摘要:最近在做实时数仓,需要兼顾离线和实时两种查询方式,大致的方案是数据通过binlog抽取,经Phoenix插入,hive映射hbase表;Phoenix创建索引,实时查询Phoenix;离线查询hive。(这个方案后面再写博客单独介绍) 但这都不是重点,重点是为了避免或者技术上100%解决binlog 阅读全文
posted @ 2019-02-22 11:05 gabry.wu 阅读 (111) 评论 (0) 编辑
摘要:本博客讨论一下akka在秒杀场景下的应用,提出自己的见解,只做抛砖引玉,大神勿喷。秒杀活动涉及到前中后台各个阶段,为了说明问题,我们简化场景,只研究akka在后台如何处理秒杀业务。 秒杀活动 所谓的秒杀活动,简单点来说,就是把某个稀缺商品或促销商品,挂到页面,供大量客户抢购。这里有两个关键点,商品数 阅读全文
posted @ 2018-09-19 11:08 gabry.wu 阅读 (1841) 评论 (0) 编辑
摘要:熔断器,在很多技术栈中都会出现的一种技术。它是在分布式系统中提供一个稳定的阻止嵌套失败的机制。 该怎么理解呢?简单来说,在分布式环境中,如果某个计算节点出现问题,很容易出现失败的逆向传到或整个系统的雪崩。什么意思呢?比如某个服务按照顺序依次调用了其他的三个服务,分别为A/B/C。如果B服务由于某种原 阅读全文
posted @ 2018-09-14 11:12 gabry.wu 阅读 (275) 评论 (0) 编辑
摘要:今天我们来谈一下akka的序列化框架,其实序列化、反序列化是一个老生常谈的问题,那么我们为什么还要研究一下akka的序列化框架呢?不就是使用哪种序列化、反序列化方法的区别么?其实刚开始的时候我也是这么想的,但是针对性、系统性的分析一下akka的序列化、反序列化过程,就会发现这个问题其实还是挺有意思的 阅读全文
posted @ 2018-09-10 14:28 gabry.wu 阅读 (438) 评论 (0) 编辑
摘要:对不起,akka typed 我是不准备进行源码分析的,首先这个库的API还没有release,所以会may change,也就意味着其概念和设计包括API都会修改,基本就没有再深入分析源码的意义了。另外这个typed actor跟OOP的class差别还是很大的,目前的API还是很丑的,至少我看着 阅读全文
posted @ 2018-09-06 17:31 gabry.wu 阅读 (123) 评论 (0) 编辑

打赏