荣锋亮 - 博客园

ingestr 基于cli 数据etl 工具

摘要： ingestr 基于cli 数据etl 工具包含的特性支持多种数据copy 支撑增量模式，包含了append，merge，delete+insert 一个cli 工具，简单支持cdc 支持server ui 模式反向etl 玩法支持（还支持增量策略）同时还提供了python sdk 方便阅读全文

posted @ 2026-11-05 08:00 荣锋亮阅读(3) 评论(0) 推荐(0)

supabase supavisor 使用简单说明

摘要：核心是是关于配置以及使用的一些说明创建租户通过api 需要jwt token， jwt token payload 应该包含过期时间, 参考如下，role 是一个可选的，但是推荐添加，符合 supabase 的玩法 { "iss": "supabase", "role": "anon", "ia 阅读全文

posted @ 2026-11-04 08:00 荣锋亮阅读(2) 评论(0) 推荐(0)

ltx sqlite 事务数据存储格式

摘要： ltx sqlite 事务数据存储格式，不少基于sqlite 的系统使用了此能力（litestream,celld,litefs）说明 celld 基于ltx 格式实现服务高可用，解决类cloudflare worker 的一些问题，litestream 基于ltx 实现sqlite的灾备，现在s 阅读全文

posted @ 2026-11-03 08:00 荣锋亮阅读(3) 评论(0) 推荐(0)

gnat 一个不错的nats 监控工具

摘要： gnat 是galaxy-io 团队开源的nats 监控工具，功能很全，基本覆盖了nats 周边的方方面面，很值得尝试下参考资料 https://github.com/galaxy-io/gnat 阅读全文

posted @ 2026-11-02 08:00 荣锋亮阅读(3) 评论(0) 推荐(0)

cratedb Foreign Data Wrappers

摘要： cratedb Foreign Data Wrappers 实际上就是cratedb 的fdw支持，目前功能并不是很强大，提供了一个内置的jdbc 实现说明 pg 的fdw 是一个很强大的功能，cratedb 监管默认提供的就一个jdbc 的，但是还是挺有意思的，可以尝试下参考资料 https: 阅读全文

posted @ 2026-11-01 08:00 荣锋亮阅读(5) 评论(0) 推荐(0)

dlt-cratedb cratedb 官方提供的dlt 扩展

摘要： dlt-cratedb cratedb 官方提供的dlt 扩展，是一个不错的学习开发三方dlt 扩展的项目（内部复用了dlt pg 扩展）参考资料 https://github.com/crate/dlt-cratedb https://cratedb.com/docs/guide/integra 阅读全文

posted @ 2026-10-31 08:00 荣锋亮阅读(4) 评论(0) 推荐(0)

pg_chdb chdb的pg 扩展

摘要： pg_chdb chdb的pg 扩展,提供了基于chdb 的查询，以及数据copy 到pg的功能（chdb_hook）性能是很不错的，值得尝下参考架构 pg_chdb有一些不一样的是独立进程，规避造成服务异常（实际上pg_duckdb 在部分pg 中使用会有造成pg 服务异常的问题）参考资料 h 阅读全文

posted @ 2026-10-30 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

filament 插件化数据复制框架

摘要： filament 插件化数据复制框架工作原理 Filament 流水线将源端连接到接收端，并定义选定资源应如何复制。在一次运行期间，Filament 将记录抽取为有界批次，写入并验证每个批次，并且只有在相关工作成功完成后才推进持久化检查点。运行时是事件驱动的：服务器接受流水线和运行请求，控制平面负阅读全文

posted @ 2026-10-29 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

dlt 自定义配置简单说明

摘要： dlt 默认有一套自己的配置以及认证查找，有基于默认位置的，有基于环境变量的，如果我们希望将dlt 作为一个包来使用就需要自己扩展下一些思路直接复用dlt 自己的默认玩法，添加自己的路径，直接参考SettingsTomlProvider 的子类实现就行直接自定义dlt.config.regis 阅读全文

posted @ 2026-10-28 08:00 荣锋亮阅读(9) 评论(0) 推荐(0)

chdb agent tools

摘要： chdb 从4.2.0 开始支持了agent 玩法，同时提供了一个smolagents 专属的agent 集成参考玩法 smolagents from chdb.agents.smolagents import chdb_smol_tools from smolagents import Code 阅读全文

posted @ 2026-10-27 08:00 荣锋亮阅读(8) 评论(0) 推荐(0)

chdb udf简单说明

摘要： udf 是一个可以快速扩展查询引擎的机制，chdb 支持多种模式的udf 定义参考玩法通过create_function，属于显示定义通过装饰器 @func 删除通过drop_function 说明函数是进程级别的，注册之后都是可以共用的，session 都是可以共享的，关于异常处理以及类型阅读全文

posted @ 2026-10-26 08:00 荣锋亮阅读(4) 评论(0) 推荐(0)

chdb durable 特性简单说明

摘要： chdb durable 是一个很有意思的新特性，可以实现跨进程，跨机器的共享，机制上通过对象存储进行状态的持久化参考玩法可以看到核心是通过chdb-core 提供的能力，语言binding 提供了一些方便的操作api 说明官方还提供了相关的示例可以学习下参考资料 https://githu 阅读全文

posted @ 2026-10-25 08:00 荣锋亮阅读(5) 评论(0) 推荐(0)

agent-native 构建 agent 应用的框架

摘要： agent-native 设计比较有意思，提供了类似同构的开发模式 agent-native 工作机制 agent-native 提供了share actions，share data，share applicaiton state 通过提供统一的模式，让http，mcp，a2a，cli 可以进行共阅读全文

posted @ 2026-10-24 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

nats request many 规范

摘要： nats request many 是一个很有价值的玩法，所以nats 将此特性作为了一个规范，方便不同语言进行实现，内部实现并不难，但是里边的设计机制很值得学习下，具体内容参考github 的adr 参考资料 https://github.com/nats-io/nats-architecture 阅读全文

posted @ 2026-10-23 08:00 荣锋亮阅读(8) 评论(0) 推荐(0)

chdb DataStore 新兼容pandas 的api

摘要： DataStore 是chdb 4.0 发布的新特性，可以兼容pandas 同时提供了高性能能力参考架构说明 DataStore 是一个很强大的特性，兼容pandas，同时提供了基于clickhouse 扩展的新特性，同时官方的报告性能提升也很不错，值得尝试下参考资料 https://clic 阅读全文

posted @ 2026-10-22 08:00 荣锋亮阅读(9) 评论(0) 推荐(0)

chdb ai 玩法

摘要： chdb支持配资llm ，然后基于llm 可以进行基于提示词的数据分析，内部基于chdb 提供的工具，设计比较有意思参考玩法连接配置llm 示例提供了一个占位符 from chdb import session as chs sess = chs.Session("./demoapp?ai_pr 阅读全文

posted @ 2026-10-21 08:00 荣锋亮阅读(10) 评论(0) 推荐(0)

chdb 基于named-collections简化key 管理

摘要： named-collections 是clickhouse 的特性，因为chdb 内部就是clickhouse 所以可以直接使用参考玩法创建 CREATE NAMED COLLECTION s3_mydata AS access_key_id = 'AKIAIOSFODNN7EXAMPLE', 阅读全文

posted @ 2026-10-20 08:00 荣锋亮阅读(4) 评论(0) 推荐(0)

hypequery clickhouse 的分析层框架

摘要： hypequery clickhouse 的分析层框架，基于ts 开发，提供可嵌入式的数据分析玩法，思路很有意思，主要提供了4层能力参考层的能力 query builder，提供了类似drizzle的玩法基于datasets 的model 提供了多租户能力（维度以及指标）服务，提供了api r 阅读全文

posted @ 2026-10-19 08:00 荣锋亮阅读(8) 评论(0) 推荐(0)

chdb 集成hypequery

摘要： hypequery 提供了与chdb 的集成，这个就是一个比较有意思的特性，直接可以灵活的进行数据本地化分析了参考玩法 import { createQueryBuilder } from '@hypequery/clickhouse'; import { Session } from 'chdb 阅读全文

posted @ 2026-10-18 08:00 荣锋亮阅读(7) 评论(0) 推荐(0)

commander-js/extra-typings commander 类型安全的玩法

摘要： commander-js/extra-typings 提供了类型推理能力，可以进行强类型的cli 命令开发，不少cli 应用都是用了此包参考玩法 app.ts import { program } from '@commander-js/extra-typings'; program.comman 阅读全文

posted @ 2026-10-17 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

直接使用spring boot 的特性进行插件化业务开发

摘要：插件化的价值是比较大的，一个是可以复用业务基础，同时扩展开发也比较方便，可以在不动核心业务系统的基础上，进行新功能开发，实现系统的按需扩展，以下是一个简单的实践参考玩法如下图，原理很简单，一个spring 项目最大的问题就是如何找到service bean 以及如何进行配置管理，其他一些东西sp 阅读全文

posted @ 2026-10-16 08:00 荣锋亮阅读(10) 评论(0) 推荐(0)

sqlite-http 触发器集成试用

摘要：属于一个简单的测试玩法加载扩展 (使用了cli，) .load ./http0 创建表 create table demo(id int,name text); 创建触发器 CREATE TRIGGER demo_after_insert AFTER INSERT ON demo BEGIN S 阅读全文

posted @ 2026-10-15 08:00 荣锋亮阅读(5) 评论(0) 推荐(0)

sqlite-http sqlite http 请求扩展

摘要： sqlite 的扩展能力也是很不错的，sqlite-http 是一个支持http 请求的扩展一些玩法业务直接使用http 函数进行数据转发集成触发器实现数据的实时处理说明 sqlite-http 是同步操作，注意对于性能的影响参考资料 https://github.com/asg017/s 阅读全文

posted @ 2026-10-14 08:00 荣锋亮阅读(9) 评论(0) 推荐(0)

@whatwg-node/server 简单试用

摘要：就是一个简单测试，将hono 挂载到express 框架中参考代码 index.ts import express from "express" import { Hono } from "hono" import {createServerAdapter} from "@whatwg-node/ 阅读全文

posted @ 2026-10-13 08:00 荣锋亮阅读(11) 评论(0) 推荐(0)

whatwg-node创建面向whatwg标准平台无关的帮助包

摘要： whatwg-node 提供了一些帮助包，可以实现通过whatwg 标准开发的web 服务与一些web 框架集成包含的模块 @whatwg-node/fetch 提供web 标准fetch 处理的 @whatwg-node/events 提供dom events 标准的支持 @whatwg-nod 阅读全文

posted @ 2026-10-12 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

zenoh 1.10 的一些变化

摘要： zenoh 1.10 发布有一段时间，有一些变化，简单说明下核心变化 java kotlin 调整了jni 的处理，核心是构建库的调整（jni 处理）对于io_uring 的支持时间戳检测的调整 shm 可等待的提供 shm 选择性传输优化高级订阅者可以配置自己的声明周期 zenoh deb 阅读全文

posted @ 2026-10-11 08:00 荣锋亮阅读(16) 评论(0) 推荐(0)

s3proxy oss 集成简单说明

摘要： oss 也是兼容oss 协议的（尽管还是有些许差异），以下是关于支持oss 的配置参考配置核心是endpoint，bucket，key 等信息参考配置 const proxy = new S3Proxy({ bucket: '<bucket>', endpoint: 'https://oss- 阅读全文

posted @ 2026-10-10 08:00 荣锋亮阅读(12) 评论(0) 推荐(0)

s3proxy简单试用

摘要：以前简单说过s3proxy 提供了多种模式，支持多种框架,以下是集成website 能力提供静态资源访问的能力环境准备 minio services: s3: image: minio/minio:RELEASE.2025-09-07T16-13-09Z command: server /data 阅读全文

posted @ 2026-10-09 08:00 荣锋亮阅读(5) 评论(0) 推荐(0)

Ansible Runner 方便运行ansible 的框架

摘要： Ansible Runner 方便运行ansbile 的框架是进行可编程操作ansible 很不错的选择，毕竟是官方出的说明如果希望基于编程模式操作ansible Ansible Runner 实际一个首选的框架，同时官方不少能力也是基于此操作的参考资料 https://docs.ansibl 阅读全文

posted @ 2026-10-08 08:00 荣锋亮阅读(4) 评论(0) 推荐(0)

agent-plugins-spec agent plugin 规范

摘要： agent-plugins-spec agent plugin 规范，目的实际上是希望将claude 的那套plugin 玩法标准化，做为一个agent 标准，可以实现资源的复用，agent-plugins-spec 内部主要集成了mcp 以及skills，当前也已经有了不少client 支持此特性阅读全文

posted @ 2026-10-07 08:00 荣锋亮阅读(9) 评论(0) 推荐(0)

durable-streams 面向agent loop 的数据语义

摘要： durable-streams 面向agent loop 的数据语义一些应用场景 ai /llm streaming 提供了token stream 的复用 agent 应用，可以支持回放支持数据同步支持实时协作支持event souceing 玩法说明 durable-streams 提阅读全文

posted @ 2026-10-06 08:00 荣锋亮阅读(18) 评论(0) 推荐(0)

flue sandbox agent 框架

摘要： flue 实际是一个harness 框架，提供了类似react hook 模式开发agent 包含的特性内部基于pi agent 框架 agent 能力 sandbox 支持沙箱持久化执行支持子agent 支持tools，skills，mcp 提供了可观测能力支持通道提供了多环境运行部署，阅读全文

posted @ 2026-10-05 08:00 荣锋亮阅读(9) 评论(0) 推荐(0)

receptor ansible 提供的任务调度以及执行服务

摘要： receptor是开源的，但是目前star 并不高，设计上还是比较有意思的，同时ansible runner 也支持包含的特性 overlay 网络模式的分布式worker 管理支持mesh 玩法，可以通过tcp以及udp 进行通信包含服务发现以及路由能力支持与k8s 的集成说明 rece 阅读全文

posted @ 2026-10-04 08:00 荣锋亮阅读(5) 评论(0) 推荐(0)

cyberwave 连接物理ai 的平台

摘要： cyberwave 实际是一个云平台，但是架构设计还是挺有意思的，同时提供了python sdk 可以了解内部的一些设计说明 cyberwave 是将云边端以及ai、集成、模拟，物理控制集成在一起，很有意思，有利用到mqtt 、容器等一些技术，可以研究下参考资料 https://github.c 阅读全文

posted @ 2026-10-03 08:00 荣锋亮阅读(13) 评论(0) 推荐(0)

nats 进行大文件消息传递的一些方法

摘要： nats 支持多种模式，默认nats 有消息包的限制，有限制并不是nats 不能进行大数据包的处理，比如nats 的object storage 通过chunk 就可以支持大包，如果我们希望自己实现通过nats 的文件包处理（尤其是大文件）就需要进行一些优化原理核心是利用nats 的pub 以及阅读全文

posted @ 2026-10-02 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

multiprocess 更好的multiprocessing

摘要： multiprocess fork 自 multiprocessing，做了一些扩展主要特性 multiprocess启用：使用管道或多生产者/多消费者队列在进程间传输对象使用服务器进程或（对于简单数据）共享内存在进程间共享对象 multiprocess提供：所有同步原语的等效项thread 阅读全文

posted @ 2026-10-01 08:00 荣锋亮阅读(10) 评论(0) 推荐(0)

flipt v2 的变化

摘要：最近在看flipt 发现变化还是很大的，以前属于中心化的，现在支持git native 的玩法参考对比如下图，变化还是很大的说明新版本的特性还是变化很大的，设计上基于git 的是核心，同时还完整支持openfeature 参考资料 https://github.com/flipt-io/fl 阅读全文

posted @ 2026-09-30 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

pulumi 基础设施既代码框架

摘要： pulumi基础设施既代码框架，相比terraform 记忆配置的玩法，pulumi 是通过代码进行基础设施管理的包含的特性支持通过ts，python，go，net，java， yaml 等进行基础设施的定义以及管理支持与ai 的集成，可以通过code agent 实现基础设施的agent （阅读全文

posted @ 2026-09-29 08:00 荣锋亮阅读(6) 评论(0) 推荐(0)

pyinfra 简单试用

摘要：测试下基于python 代码的集成参考示例 s.py from pyinfra.api import Config, Inventory, State from pyinfra.api.connect import connect_all from pyinfra.api.operation im 阅读全文

posted @ 2026-09-28 08:00 荣锋亮阅读(8) 评论(0) 推荐(0)

cosmiconfig 方便加载配置的npm 包

摘要： cosmiconfig 是一个比较方便的工具，提供了灵活的配置加载处理能力，可以用来实现不少框架的约定配置文件能力参考玩法 index.ts const { cosmiconfig } = require('cosmiconfig'); const explorer = cosmiconfig(" 阅读全文

posted @ 2026-09-27 08:00 荣锋亮阅读(8) 评论(0) 推荐(0)

导航

公告