摘要: 一、基础定义 Milvus2.0版本后,Woodpecker使用了专门构建的云原生WAL(预写日志)引擎,用于替代传统的Kafka/Pulsar,承担向量数据库写入流水、持久化、故障恢复、流订阅能力,是Milvus新一代的流式架构核心组件。 当前定位:内置式日志消息系统,不再需要独立部署外部MQ集群 阅读全文
posted @ 2026-06-18 13:10 深蓝---Jack 阅读(19) 评论(0) 推荐(0)
摘要: 一、向量数据库Milvus数据结构 Milvus的数据结构主要分为:逻辑模型、物理模型、段结构与索引;核心是:Collection - > Shard -> Partition ->Segment - >Field/Entity 1. 逻辑数据模型 1). Collection(集合): 关系数据库 阅读全文
posted @ 2026-06-18 13:04 深蓝---Jack 阅读(23) 评论(0) 推荐(0)
摘要: 一、介绍 Milvus 流式服务是基于 ** 预写日志(WAL)** 构建的内部流式系统模块,是整个流式能力的核心载体,支撑数据流式写入、数据订阅、集群故障恢复、流式数据转历史数据、增量数据查询等核心能力 ,流服务主要包括三个部分:流客户端(Streaming Client)、流协调器(Stream 阅读全文
posted @ 2026-06-18 13:02 深蓝---Jack 阅读(14) 评论(0) 推荐(0)
摘要: 一、Milvus 关键能力速览(对接业务) 在进入场景前,先锁定要用到的几个特性: 多种向量索引:HNSW(高性能)、DiskANN(大容量低成本)、量化索引(内存压缩)。 标量过滤:支持在向量检索时,近乎无损地根据时间、类别、用户ID等过滤。 分区(Partition)与分区键:物理隔离海量数据, 阅读全文
posted @ 2026-06-18 13:00 深蓝---Jack 阅读(22) 评论(0) 推荐(0)
摘要: 一、模板方法模式(封装算法)定义: 模板方法模式在一个方法中定义一个算法的骨架,而将一些步骤延迟到子类中。模板方法使得子类可以在不改变算法结构的情况下,重新定义算法中的某些步骤。 钩子是一种被声明在抽象类中的方法,但只有空的或者默认的实现。钩子的存在,可以让子类有能力对算法的不同点进行挂钩。要不要挂 阅读全文
posted @ 2020-01-20 15:52 深蓝---Jack 阅读(257) 评论(0) 推荐(0)
摘要: 一、外观模式定义 外观模式定义:提供了一个统一的接口,用来访问子系统中的一接口。外观定义了一个高层接口,让子系统更容易使用外观模式将一个或者数个类的复杂的一切都隐藏在背后,只显露出一个干净美好的外观。通过实现一个提供更合理的接口的外观类,你可以将一个复杂的子系统变的更加容易使用。外观模式不只是简化了 阅读全文
posted @ 2020-01-10 17:30 深蓝---Jack 阅读(420) 评论(0) 推荐(0)
摘要: 一、适配器模式介绍适配器模式:将一个类的接口,转换成客户期望的另一个接口,适配器让原本接口不兼容的类可以合作无间。适配器模式有着良好的OO设计原则,使用对象组合,以修改的接口包装被适配者,此外这样的做法还有额外的有点,被适配者的任何子类,都可以搭配适配器使用。 二、适配器模式类图 适配器模式分为两种 阅读全文
posted @ 2020-01-10 17:20 深蓝---Jack 阅读(551) 评论(0) 推荐(0)
摘要: 分布式理论(一) CAP理论 一.CAP理论前言 CAP原则又称为CAP理论,主要思想是在任何一个分布式系统中都无法同时满足CAP。 C(Consistency):表示一致性,所有的节点同一时间看到的是相同的数据。 A(Avaliablity):表示可用性,不管是否成功,确保一个请求都能接收到响应。 阅读全文
posted @ 2019-08-21 23:06 深蓝---Jack 阅读(1528) 评论(0) 推荐(0)
摘要: 边缘计算基础 一、边缘计算的基本概念 在万物互联的时代,万物互联不仅包括物联网环境下包括物与物之间互联,还包括具有语境感知功能、更强的计算能力和感知能力的人与物的互联。万物互联以物理网络为基础、融合网络智能、万物之间的协同能力以及可视化的功能。 传感器、智能手机、可穿戴设备以及智能家电等设备将成为万 阅读全文
posted @ 2019-08-14 21:32 深蓝---Jack 阅读(2607) 评论(0) 推荐(0)
摘要: MQTT入门介绍(一) 一.MQTT简述 MQTT(Message Queuing Telemetry Transport,消息队列遥测传输协议),是一种基于发布/订阅(publish/subscribe)模式的"轻量级"通讯协议,该协议构建于TCP/IP协议上,由IBM在1999年发布。MQTT最 阅读全文
posted @ 2019-08-11 21:28 深蓝---Jack 阅读(2842) 评论(0) 推荐(1)