摘要：
0 序言 近期因某项目的部署诉求，需要基于 Stream Park，部署 Flink on k8s。在此学习总结一二。 1 概述：Apache Stream Park Apache Stream Park 在实时处理领域，Apache Spark™ 和 Apache Flink® 代表着巨大的进步， 阅读全文
posted @ 2025-11-20 00:01
千千寰宇
阅读(94)
评论(0)
推荐(0)
摘要：
0 序言 LSM-tree作为现代数据库 NewSQL 存储引擎的核心，以顺序写和异地更新大幅提升写入性能，解决了B-tree在写放大和磁盘碎片上的瓶颈。 本文意在解析LSM-tree的Memtable、SSTable与WAL机制，揭示读写流程和合并策略（Leveled与Tiered Compact 阅读全文
posted @ 2025-11-19 00:25
千千寰宇
阅读(232)
评论(1)
推荐(1)
摘要：
1 概述: NewSQL NewSQL的定义 NewSQL的定义 NewSQL 是对各种新的可扩展/高性能数据库的简称，这类数据库不仅具有NoSQL对海量数据的存储管理能力，还保持了传统数据库支持ACID和SQL等特性。 NewSQL是指这样一类新式的关系型数据库管理系统，针对OLTP（读-写）工作 阅读全文
posted @ 2025-11-18 01:18
千千寰宇
阅读(22)
评论(0)
推荐(0)
摘要：
0 序 笔者在项目中使用/运维 InfluxDB 和 OpenGemini 时序数据库已有些年头了，虽然对其数据库源码研究得还不算特别精深，但仍有必要沉淀一二，总结一二了。 此篇主要针对 influxdb v1。如无特殊说明，则默认基于 influxdb v1.7.5 进行源码、原理和架构的分析。 阅读全文
posted @ 2025-11-17 00:40
千千寰宇
阅读(230)
评论(0)
推荐(1)
摘要：
0 序言 近期，工作项目上某 Flink 程序的数据处理性能问题一直萦绕心头，今日第一次尝试使用火焰图这一工具来分析性能问题。 最早项目上的 Flink 是 1.12 ，尚不支持此功能；但现在已切换到 Flink 1.15 版本，火焰图功能（自 1.13起）是被支持的了。 或不多说，开始正文。 主要 阅读全文
posted @ 2025-11-08 09:19
千千寰宇
阅读(101)
评论(0)
推荐(0)
摘要：
1 数据仓库模型设计 1.1 数据分层模型 1.2 数据分层边界 1.3 数据主题域 主题域是面向业务分析，将业务分析过程进行高度概括及抽象，是在较高层次上将企业信息系统中的数据综合、归类并进行分析利用的抽象。 目前互联网缺少相应标准模型的定义，可供参考讨论。 用户主题域：描述各类参与人（个人、群、 阅读全文
posted @ 2025-11-05 00:55
千千寰宇
阅读(13)
评论(0)
推荐(0)
摘要：
0 序 原始作者 | 杭州度言软件大数据团队 发布时间 | 2022.12.27 杭州度言软件有限公司（度言软件）成立于2014年，是信贷不良资产处置技术服务供应商，以“智能科技赋能不良资产处置，推动贷后行业合规高效发展”为使命，运用云通讯、大数据、人工智能等智能科技为信贷不良资产处置业务赋能，提供 阅读全文
posted @ 2025-11-05 00:04
千千寰宇
阅读(22)
评论(0)
推荐(0)
摘要：
0 序 Doris和ClickHouse是两款热门的OLAP数据库，它们在架构、功能、性能和易用性等方面存在差异 Doris : 最初由百度大数据部研发，名为百度Palo。 2017年开源，2018年贡献给Apache社区并更名为Apache Doris。 设计目标是为了满足大数据场景下的实时分析需 阅读全文
posted @ 2025-11-04 23:34
千千寰宇
阅读(75)
评论(0)
推荐(0)
摘要：
1 Hologres：阿里巴巴版实时数仓产品 https://help.aliyun.com/zh/hologres/product-overview/architecture 产品定位 Hologres是阿里巴巴自主研发的一站式【实时数仓引擎】（Real-Time Data Warehouse） 阅读全文
posted @ 2025-11-04 00:57
千千寰宇
阅读(34)
评论(0)
推荐(0)
摘要：
0 引言 作者： 海博 理想汽车高级大数据工程师 贾天福 理想汽车高级大数据工程师 原链: 云栖实录｜理想汽车基于 Hologres + Flink 构建万亿级车联网信号实时分析平台 - Weixin 1 智能汽车时代的数据挑战 随着电动车和智能汽车的快速普及，车联网信号数据呈现爆发式增长。 理想汽 阅读全文
posted @ 2025-11-04 00:35
千千寰宇
阅读(25)
评论(0)
推荐(0)
摘要：
0 序 本文根据 2025 云栖大会演讲整理而成 演讲信息如下: 演讲人： 聂清 零跑汽车大数据高级专家 零跑科技的快速发展与数据挑战 https://zhuanlan.zhihu.com/p/1966879670852093187 零跑科技成立于2015年12月，总部位于浙江杭州，是国内造车新势力 阅读全文
posted @ 2025-11-03 23:59
千千寰宇
阅读(19)
评论(0)
推荐(0)
摘要：
FAQ for Doris Q: Doris数据写入失败，日志报SQLException: errCode = 2, detailMessage = disk /opt/software/apache-doris-2.0.4-bin-x64/be/storage on backend xxx exc 阅读全文
posted @ 2025-10-17 16:20
千千寰宇
阅读(21)
评论(0)
推荐(0)
摘要：
1 序 面对越来越多的智能体平台，产品人该如何选型？ 本文将从功能定位、协同方式、应用场景等维度，系统梳理 Coze、Dify、百炼、N8N、Maxkb、Fastgpt 的异同，并提供一套实用的工具链搭建思路。 2 概述：AI开发平台 各AI平台的核心定位与技术特点 Coze（字节跳动）: 商业闭源 阅读全文
posted @ 2025-10-15 07:48
千千寰宇
阅读(228)
评论(0)
推荐(0)
摘要：
概述: Doris 之数据查询 函数篇 GET_JSON_STRING 函数 : JSON 字段提取为String 推荐文献 GET_JSON_STRING 函数 - Doris/SQL函数 GET_JSON_STRING 是 Apache Doris 提供的一个内置函数 用于从 JSON 文本中提 阅读全文
posted @ 2025-10-13 15:35
千千寰宇
阅读(75)
评论(0)
推荐(0)
摘要：
1 概述: 数据建模之键的设计 代理键 / 业务键 / 自然键 / 复合键 在数据管理中，核心常用的键有: 代理键、业务键、自然键、复合键。 它们的核心区别在于是否与业务关联、唯一性来源及使用场景。 键类型 核心定义 关键区别（与代理键对比） 典型示例 代理键 人工生成、与业务无关的唯一标识符，仅用 阅读全文
posted @ 2025-10-13 09:35
千千寰宇
阅读(28)
评论(0)
推荐(0)
浙公网安备 33010602011771号