摘要: 线上故障通常是指大规模的影响线上服务可用性的问题或者事件,通俗点讲就是:掉‘坑’里了,这个‘坑’就是线上故障!线上故障的处理过程可以形象地表达为:‘踩坑’、‘跳坑’、‘填坑’、‘避坑’。 线上故障的处理不仅是一项技术活,更是对技术人员/技术团队反应能力、决策能力、判定能力、组织能力的考验。面对突发的生产故障,需要快速定位问题,找到解决方案,快速实施解决方案并不是一件容易的事情。本文主要包括如下内容:线上故障处理的目标、思路、步骤、基础设施。阅读全文
posted @ 2017-05-01 17:10 倒骑的驴 阅读(2945) 评论(13) 编辑
摘要: 本文翻译自LMAX关于Disruptor的论文,同时加上一些自己的理解和标注。Disruptor是一个高效的线程间交换数据的基础组件,它使用栅栏(barrier)+序号(Sequencing)机制协调生产者与消费者,从而避免使用锁和CAS,同时还组合使用预分配内存机制、缓存行机制(cache line)、批处理效应(batch effect)来达到高吞吐量和低时延的目标。目前Disruptor版本已经迭代至3.0,本论文是基于Disruptor1.0写就,在新版本中,相对与1.0版本,其核心设计思想没有变,只是实现细节有所调整和优化,因此,此论文仍然很有研读意义。阅读全文
posted @ 2017-06-19 23:13 倒骑的驴 阅读(297) 评论(2) 编辑
摘要: 大文件拆分问题涉及到io处理、并发编程、生产者/消费者模式的理解,是一个很好的综合应用场景,为此,花点时间做一些实践,对相关的知识做一次梳理和集成,总结一些共性的处理方案和思路,以供后续工作中借鉴。 本文将尝试由浅入深的方式表述大文件拆分的问题及不同解决方案,给出的方案不一定是最优解,也并非线上环境论证过的靠谱方式,目的只是在于通过该问题融会贯通io、多线程等基础知识理论。生产环境请慎用。 本文不会逐行讲解代码实现,而注重在方案设计及思路探讨上,会在文末附上源码demo git地址。阅读全文
posted @ 2017-05-21 17:31 倒骑的驴 阅读(305) 评论(0) 编辑
摘要: java中常用的文件写入方式有:FileChannel,BufferedOutputStream,FileOutputStream,BufferedWriter,FileWriter;本文通过简单的实验讨论不同文件大小写入场景下,何种写入方式的效率最高,以及可能遇到的一些问题。阅读全文
posted @ 2017-05-16 23:58 倒骑的驴 阅读(427) 评论(4) 编辑
摘要: 如何确保高并发下网站的高可用性?基本思路:解耦、集群、负载均衡、按需扩展、缓存、动静分离、读写分离、分库分表。阅读全文
posted @ 2017-05-01 21:24 倒骑的驴 阅读(113) 评论(1) 编辑
摘要: 线上故障通常是指大规模的影响线上服务可用性的问题或者事件,通俗点讲就是:掉‘坑’里了,这个‘坑’就是线上故障!线上故障的处理过程可以形象地表达为:‘踩坑’、‘跳坑’、‘填坑’、‘避坑’。 线上故障的处理不仅是一项技术活,更是对技术人员/技术团队反应能力、决策能力、判定能力、组织能力的考验。面对突发的生产故障,需要快速定位问题,找到解决方案,快速实施解决方案并不是一件容易的事情。本文主要包括如下内容:线上故障处理的目标、思路、步骤、基础设施。阅读全文
posted @ 2017-05-01 17:10 倒骑的驴 阅读(2945) 评论(13) 编辑
摘要: 系统背景介绍 用户系统负责用户生命周期管理,包括注册、登陆、用户信息获取等,其作为基础服务只提供内网服务,简称为service;application组件包装service的服务对app渠道提供服务;service前面使用F5作为负载均衡器。 架构简图如下: 线上故障事件描述 上午9点50分,监控系阅读全文
posted @ 2017-05-01 17:08 倒骑的驴 阅读(218) 评论(2) 编辑
摘要: 概述 java cocurrent包提供了很多并发容器,在提供并发控制的前提下,通过优化,提升性能。本文主要讨论常见的并发容器的实现机制和绝妙之处,但并不会对所有实现细节面面俱到。 为什么JUC需要提供并发容器? java collection framework提供了丰富的容器,有map、list阅读全文
posted @ 2017-04-23 22:11 倒骑的驴 阅读(63) 评论(0) 编辑
摘要: java cocurrent package中的Excutor体系,主要提供了实时和定时(含定频)的Excutor,支持单个线程,也支持线程池;他们的职责在于将任务执行者和任务发布者解耦。 实时任务处理可以当着定时任务的特例,ScheduledThreadPoolExecutor也提供了支持实时任务的api。线程池创建通常使用Excutors搞定,典型的线程池:单个、固定大小线程池、可调节大小线程池,自定义线程池时,需要调配好queue大小和线程池大小的关系。使用submit api将任务提交给线程池,根据实际场景,通过对应的Future接口实现类的api对任务执行情况进行监控,必要时可以将执行中的任务停止。 使用流程:创建线程池,创建任务,提交任务,跟踪并处理任务结果。阅读全文
posted @ 2017-04-23 12:32 倒骑的驴 阅读(175) 评论(0) 编辑
摘要: BlockingQueue顾名思义‘阻塞的队列’,是指在:队列的读取行为被阻塞直到队列不为空时,队列的写入行为被阻塞直到队列不满时。BlockingQueue是java.util.concurrent工具包(jdk1.5版本引入,作者:Doug Lea)的重要基础工具,在ThreadPoolExcutor及tomcat等服务端容器中都有使用到。从代码层面剖析BlockingQueue的实现细节。阅读全文
posted @ 2017-04-22 11:51 倒骑的驴 阅读(46) 评论(0) 编辑