chaplinthink

摘要： 本文主要对ES聚合场景下部分结果数据未返回问题分析,给出排查思路和解决方案 阅读全文

摘要： 本文主要介绍HBase平台的建设思路及设计, 并对跨集群数据迁移实践进行总结 阅读全文

摘要： 背景 项目中有个需求是需要几个字段作为标签，统计各个标签的文档数量，同时支持分词后的全文检索功能。 所使用的ES版本: elasticsearch-5.6.16 原有的mapping设计： curl -XPUT http://ip:9200/meta_es_metric_data -d' { "se 阅读全文

摘要： 目录架构设计架构的种类软件架构是什么应用程序架构系统架构软件架构敏捷的软件架构是什么架构对上设计软件架构重要吗软件架构的角色拓展T小心鸿沟设计软件原则技术不是实现细节 架构设计 下至接口设计 上至技术选型 架构PPT少不了对ROI（投资回报）和TCO（总体拥有成本）陈述 想要在这个行业里有所作为，就 阅读全文

摘要： 元数据设计 如上图，Doris 的元数据主要存储4类数据： 用户数据信息。包括数据库、表的 Schema、分片信息等。 各类作业信息。如导入作业，Clone 作业、SchemaChange 作业等。 用户及权限信息 集群及节点信息 元数据目录 元数据目录通过 FE 的配置项 meta_dir 指定。 阅读全文

摘要： 一、系统架构 Doris是一个MPP的OLAP系统，主要整合了Google Mesa（数据模型），Apache Impala（MPP Query Engine)和Apache ORCFile (存储格式，编码和压缩) 的技术。 既可以满足OLAP查询,也可以满足Adhoc查询需求。 Frontend 阅读全文

摘要： 系统调研 用户视角的系统调研（只需使用） 平台视角的系统调研（需要进行系统的维护和二次开发） 平台侧系统调研 平台侧系统调研的原则 系统是动态发展的，而且许多系统开发迭代速度很快，所以基于某个固定版本去测试意义不是很大 测试环境的规模和测试场景有限，我们不可能测试出大规模集群下的性能瓶颈和扩展性问题 阅读全文

摘要： Apache Atlas 架构设计及源代码分析, 以Hive建库为例,分析元数据采集的主体流程 阅读全文

摘要： 问题描述 我们有个系统设计的时候针对Hive创建表、删除表, 需要更新ES中的一个状态,标记是否删除,在几乎同时执行两条下面的语句的时候,发现在ES 中出现表即使被创建了还是无法被查询到的情况,针对该问题记录下排查分析过程. drop table if exists tmp.test_create_ 阅读全文

摘要： 介绍Docker概念、常用命令及将SpringBoot项目部署至Docker 阅读全文