大圆那些事

摘要： 流聚合（stream join）是指将具有共同元组（tuple）字段的数据流（两个或者多个）聚合形成一个新的数据流的过程。这里通过对storm-starter（代码见：https://github.com/nathanmarz/storm-starter）中的示例代码剖析来说明Storm中是如何进行流的聚合操作的。 阅读全文

摘要： 实时计算引擎在处理实时数据时，要保证新到来的数据被及时得到处理。例如，对于网站的访问日志数据，假设每一分钟有一个日志文件，那么实时计算引擎必须满足能够在一分钟之内处理完这一分钟的日志数据文件，否则会导致日志文件堆积而不能被及时处理。前几天，量子后端团队排查了一次实时计算引擎出现的处理延迟故障，其中使用到了ltrace和strace工具，在这里和大家分享一下。 阅读全文

摘要： 最近在项目中使用了开源OLAP引擎——Mondrian实现一个多维分析系统，在项目后期系统优化阶段使用了Mondrian中的聚合表机制。这里结合Mondrian官方资料和个人使用经验，对Mondrian中聚合表的概念、应用场景、如何使用、注意事项等内容做一个总结。 阅读全文

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第四部分内容：数据计算相关的优化方法。 阅读全文

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第三部分内容：读表操作相关的优化方法。 阅读全文

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第二部分内容：写表操作相关的优化方法。 阅读全文

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第一部分内容：表的设计相关的优化方法。 阅读全文

摘要： 本文从实际使用经验出发，介绍一款开源的MySQL数据库InnoDB数据恢复工具：innodb-tools，它通过从原始数据文件中提取表的行记录，实现从丢失的或者被毁坏的MySQL表中恢复数据。例如，当你不小心执行drop table或者drop database之后，可以通过以下方式恢复数据。 阅读全文

摘要： 近期在做一个基于LAMP体系的项目，在系统测试阶段发现了Apache+PHP无法成功上传大文件的问题，于是百度、google一顿搜后，发现原来是PHP配置的原因。这里记录水文一篇，留作日后遇到类似问题参考使用，避免二次检索做无用功。 阅读全文

摘要： 上一篇博客介绍了KFS中RPC实现机制MetaServer端的实现，下面接着介绍一下KfsClient端的实现框架。 阅读全文