ElasticSearch服务提供对索引操作、文档操作、分词操作等多种接口。接口的查询通常采用DSL的形式，也可采用SQL形式进行查询。 ...
Apache Doris设计思想介绍与应用场景 MPP ( Massively Parallel Processing )，即大规模并行处理，在数据库非共享集群中，每个节点都有独立的磁盘存储系统和内存系统，业务数据根据数据库模型和应用特点划分到各个节点上，每台数据节点通过专用网络或者商业通用网络互相 ...
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限 ...
我把粉丝们发给我的面经好好整理了一下，从里面挖出了十个被问得比较频繁的数据库面试题，可以收藏起来，在面试之前给它突击过一遍。 ...
视图 1. 为什么要使用视图？什么是视图？ 为了提高复杂 SQL 语句的复用性和表操作的安全性，MySQL 数据库管理系统提供了视图特性。所谓视图，本质上是一种虚拟表，在物理上是不存在的，其内容与真实的表相似，包含一系列带有名称的列和行数据。但是，视图并不在数据库中以储存的数据值形式存在。行和列数据 ...
问题场景 SQL Server事务复制在正常创建发布和订阅之后，log reader Job 启动异常，出现“The process could not execute ‘sp_replcmds’ on xxx”等异常日志导致代理服务无法正常启动。 异常现象 参考下图，异常日志如下 Error me ...
版权声明 版权声明：原创文章 禁止转载 请通过右侧公告中的“联系邮箱（wlsandwho@foxmail.com）”联系我 勿用于学术性引用。 勿用于商业出版、商业印刷、商业引用以及其他商业用途。 本文不定期修正完善。 本文链接：https://www.cnblogs.com/wlsandwho/p ...
整理了一下pg_dump逻辑备份还原，pg啥时候推出一个库级别的物理备份还原就好，逻辑备份能行但操作大库效率太低，就像MySQL/MSSQL一样，跨实例做库级别还原的需求太多了 pg_dump备份 pg_dump备份 -F format 参数，备份文件的格式。format可以是下列之一： p pla ...
Percona Toolkit 神器全攻略（系统类） Percona Toolkit 神器全攻略系列共八篇，前文回顾： 前文回顾 Percona Toolkit 神器全攻略 Percona Toolkit 神器全攻略（实用类） Percona Toolkit 神器全攻略（配置类） Percona T ...
索引 百万级别或以上的数据如何删除？ 关于索引：由于索引需要额外的维护成本，因为索引文件是单独存在的文件，所以当我们对数据的增加、修改、删除都会产生额外的对索引文件的操，这些操作需要消耗额外的IO，会降低增/改/删的执行效率。所以，在我们删除数据库百万级别数据的时候，查询MySQL官方手册得知删除数 ...
背景ClickHouse是一个面向分析型的开源列式数据库管理系统,它主要应用于以下几个场景: 数据仓库和商业智能分析:ClickHouse擅长处理大规模的数据,可以用于构建企业级的数据仓库,支持复杂的OLAP查询,可用实时数仓，适合各种商业分析和报表应用。 实时分析和监控:ClickHouse以毫秒 ...
Apache SeaTunnel 2.3.6 版本于近日正式发布，社区期待的 SeaTunnel Zeta Master/Worker 新架构、事件通知机制、支持动态编译的transform等新功能和新能力在这次版本中都有了全面的更新，并添加了首个向量数据库 Milvus。此外，本版本还进行了一些基 ...
一、背景 大数据服务是数据平台建设的基座，随着B站业务的快速发展，其大数据的规模和复杂度也突飞猛进，技术的追求也同样不会有止境。 B站一站式大数据集群管理平台（BMR），在千呼万唤中孕育而生。本文简单介绍BMR的由来、面临的主要矛盾以及如何在变化中求得生存与发展。 下图是截至2024年6月初，统计到 ...
摘要：现在商用优化器大多都是基于统计信息进行查询代价评估，因此统计信息是否实时且准确对查询影响很大，特别是分布式数据库场景。本文详细介绍GaussDB(DWS)如何实现了一种轻量、实时、准确的统计信息自动收集方案。 本文分享自华为云社区《【最佳实践】GaussDB(DWS) 统计信息自动收集方案》， ...
在大数据时代，企业对数据的依赖程度越来越高。然而，随着业务的不断发展和技术的快速迭代，大数据平台的集群迁移已成为企业数据中台发展途中无法回避的需求。在大数据平台发展初期，国内数据中台市场主要以国外开源 CDH、商业化 CDP、HDP 为主。然而，由于国际形势的转变，以海外大数据基础平台作为基石构建的 ...
MySQL UDF 提权初探 对 MySQL UDF 提权做一次探究，什么情况下可以提权，提取的主机权限是否跟mysqld进程启动的主机账号有关 数据库信息 MySQL数据库版本:5.7.21 UDF UDF：(User Defined Function) 用户自定义函数，MySQL数据库的初衷是用 ...
数据库基础知识 为什么要使用数据库？ 数据保存在内存 优点：存取速度快 缺点：数据不能永久保存 数据保存在文件 优点：数据永久保存 缺点： 速度比内存操作慢，频繁的IO操作。 查询数据不方便 数据保存在数据库 数据永久保存 使用SQL语句，查询方便效率高。 管理数据方便 什么是SQL? 结构化查询语 ...
事务复制中订阅节点非活动（ inactive）错误 在SQLServer的事务复制模型中，会出现“订阅过期”的错误，相关订阅分发代理Job的典型错误如下："Agent SQLNYC01-Onvoices-PubInvoicesInvoices-SQLNYC01-1353 is retrying af ...
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限 ...
在当今数字化的时代，企业对于数据的管理和利用愈发重视，而构建全面的指标管理体系成为了企业提升数据价值、优化决策流程的关键环节。 构建完整的指标属性体系 指标属性体系是指标管理的核心，我们一般将指标属性划分为四类：基础属性、业务属性、技术属性和管理属性。 基础属性：如指标名称、编码等。 业务属性：如业 ...
