全局锁 全局锁是对整个数据库实例加锁，整个库处于只读状态。 flush tables with read lock 适用场景 全局锁适用于做全库逻辑备份，但是整个库处于只读状态，在备份期间，所有的更新操作、DDL将会被阻塞，会对业务产生影响。 single-transaction mysqldump ...

本文首发于公众号：Hunter后端 原文链接：es笔记六之聚合操作之指标聚合 聚合操作，在 es 中的聚合可以分为大概四种聚合： bucketing(桶聚合) mertic(指标聚合) matrix(矩阵聚合) pipeline(管道聚合) bucket 类似于分类分组，按照某个 key 将符合条件 ...

本文首发于公众号：Hunter后端 原文链接：es笔记五之term-level的查询操作 官方文档上写的是 term-level queries，表义为基于准确值的对文档的查询，可以理解为对 keyword 类型或者 text 类型分词为 keyword 的字段进行 term 形式的精确查找。 以下 ...

近几年IT界软硬件“国产化”搞得很密集，给很多公司带来了商机。但是有些公司拿国外的代码改改换个皮肤，就是“自主知识产权”的国产软件，光明正大卖钱，这个有点...，还经常有丑闻露出，譬如某星浏览器、C某-IDE... 话不多说，最近有个项目需要国产化改造，业主方推荐了国产数据库 瀚高数据库，我们原来用 ...

[20231103]rename IDL_UB1$后使用bbed的恢复3.txt--//上午解决rename IDL_UB1$后使用bbed的恢复问题，就是涉及到的5个索引4个需要修改，其中一个因为NULL值的缘故，不需要修改。--//主要原因是rename是delete再insert obj$,反 ...

本文分享自华为云社区《浅析KV存储之长尾时延问题，华为云 GeminiDB Redis 探寻行业更优解决方案！》，作者：华为云数据库GaussDB NoSQL团队。 目前，KV存储的广泛使用极大程度上源于快速访问的业务需求，而这种业务通常对时延敏感度高，在较好的平均性能下，还需要解决特定场景下的性能 ...

在之前的实时湖仓系列文章中，我们已经介绍了实时湖仓对于当前企业数字化转型的重要性，实时湖仓的功能架构设计，以及实时计算和数据湖结合的应用场景。 在本篇文章中，将介绍袋鼠云数栈在构建实时湖仓系统上的探索与落地实践，及未来规划。 数栈为什么选择实时湖仓 数栈作为一个数据开发平台，在未引入实时湖仓之前提供 ...

数据库底层实现博大精深，本文所述，根据线上场景进行了一些研究和探讨，希望能为相关场景提供一些启示。文章中难免会有不足之处，希望读者能给予宝贵的意见和建议 ...

MySQL总共支持四种连接方式访问数据库，如下表格所示，其中Linux平台环境下，主要有两种连接方式，一种是TCP/IP连接方式，另外一种是socket方式。Name pipe和Share memory是Windows平台下独有的连接方式。 那么，MySQL数据库中，我们能否查看会话具体使用的连接方 ...

近日，由天翼云科技有限公司云网产品事业部天玑实验室撰写的《关于公有云区分负载QoS感知的内存资源动态超分管理优化》（Thoth：Provisioning Overcommitted Memory Resource with Differentiated QoS in Public Clouds）论文... ...

本文分享自华为云社区《Proxy下的Prepare透传，让GaussDB(for MySQL)更稳固，性能更卓越》，作者： GaussDB 数据库 。 1.引言 在很多业务场景下，数据库应用程序处理大量相同的SQL语句——只需更改SQL语句中的文字或变量值。例如：使用相同的SQL模板进行WHERE查 ...

本文目标是：了解查询的核心原理，对比 SQL 查询优化技巧在 h2database 中的落地实现。前提：为了贴近实际应用，本文 Code Insight 基于 BTree 存储引擎。 ...

1. Sequence 定义 在Oracle中可以用SEQUENCE生成自增字段。Sequence序列是Oracle中用于生成数字序列的对象，可以创建一个唯一的数字作为主键。 2. 为什么要用 Sequence 你可能有疑问为什么要使用序列？ 不能使用一个存储主键的表并每次递增吗？或者将列设置为AU ...

1.Redis哨兵 Redis提供了哨兵（Sentinel）机制来实现主从集群的自动故障恢复。 1.1.哨兵原理 1.1.1.集群结构和作用 哨兵的结构如图： 哨兵的作用如下： 监控：Sentinel 会不断检查您的master和slave是否按预期工作。 自动故障恢复：如果master故障，Sen ...

测试验证环境： docker容器化部署的4节点2分片和2副本（centos7+clickhouse22.1.3） 172.17.0.6 clickhouse01172.17.0.7 clickhouse02172.17.0.8 clickhouse03 172.17.0.9 clickhouse04 ...

在构建数据仓库或做数据分析时，需要对原始数据的结构进行一定的处理，有时涉及到“行转列”，有时涉及到“列转行”，那么这两个转换的方式具体是什么，有什么差异，怎么实现。 ...

本文主要以介绍方法为主，落地过程可以归纳为方案->收益测算->数据安全验证->系统稳定性验证->灰度与回滚。文中的账单系统通过step1大表压缩32%，step2大JSON字段序列化12%，step3删除无效数据10%，3个方案的顺利落地，有效的减少了50.7%的磁盘空间，成本下降也非常显著。最后，... ...

本文分享自华为云社区《GaussDB(DWS)性能调优：表扫描时过滤行数过多引起的性能瓶颈问题案例》，作者： O泡果奶~ 。 1、【问题描述】 SQL语句执行过程中，对12亿数据量的大表进行扫描，过滤99%的数据仅留617行数据，性能瓶颈位于扫描该表这里。 2、【原始语句】 set search_p ...

本文采用一张简单的架构图说明了MySQL查询中使用的组件和组件间关系。解析了一条sql语句从客户端请求mysql服务器到返回给客户端的整个生命周期流程。 ...

一、引言 前段时间因课业要求使用Docker Desktop 部署Kafka集群并编写生产者消费者程序，折磨了我好几天，在查找大量资料后终于是把整个集群搭建完成了。现在我想要分享其中搭建的历程，希望能为大家解决问题。 二、Docker集群构建 安装环境: Windows 10 2.1 启用或关闭wi ...