荣锋亮 - 博客园

json-rules-engine almanac 简单说明

摘要： almanac 实际上就是一个上下文对象，可以对于engine 中依赖的一些fact 进行计算处理，同时可以方便的进行动态fact维护，同时还会复用以前的一些计算fact 官方参考使用官方有一个比较完整的介绍例子 /* * Base fact for retrieving account data 阅读全文

posted @ 2024-11-28 08:00 荣锋亮阅读(44) 评论(0) 推荐(0)

py-spy 0.4发布

摘要：就在上个月许久没更新的py-spy 发布了新版本，提供了python 3.12，3.13 的支持，同时进行了不少bug 的修复说明 py-spy 是一个很不错的python 应用profile 工具，对于python 应用的性能问题很值得尝试下参考资料 https://github.com/be 阅读全文

posted @ 2024-11-27 13:44 荣锋亮阅读(35) 评论(0) 推荐(0)

ollama python 新版本支持传递python 函数

摘要：在ollama python sdk 的最近更新中，支持传递python 函数到chat 调用中，以下是一个简单示例参考使用 app.py from ollama import chat from ollama import ChatResponse def add_two_numbers(a: 阅读全文

posted @ 2024-11-27 13:01 荣锋亮阅读(346) 评论(0) 推荐(0)

jsonata json 查询以及转换语言

摘要： jsonata json 查询以及转换语言包含的特性轻量级借鉴xpath 3.1 模式的语法最少语法的复杂表达式支持支持支持定义函数内置不少方便数据维护以及合并的操作符以及函数灵活的结构化输出说明原始jsonata 是js 实现，目前也有不少其他语言的实现，比如java 的，jso 阅读全文

posted @ 2024-11-27 08:00 荣锋亮阅读(240) 评论(0) 推荐(0)

json-rules-engine 简单试用

摘要：以下是对于json-rules-engine 的一个简单试用 rule 简单说明 json-rules-engine rule 基于json 进行描述配置，支持一些内置的operator，当然也可以自定义，rule 支持常见的any，and操作，同时支持嵌套，每个rule 可以包含自己的回调（成功以阅读全文

posted @ 2024-11-26 08:00 荣锋亮阅读(296) 评论(0) 推荐(0)

jint .net js 引擎

摘要： jint 是一个 .net js 引擎一些运行场景 .net 应用安全的运行js（沙箱环境）暴露native .net 对象到js 引擎中脚本化应用中简单使用 using Jint; var engine = new Engine() .SetValue("log", new Action< 阅读全文

posted @ 2024-11-25 08:31 荣锋亮阅读(221) 评论(0) 推荐(0)

json-rules-engine node 基于json的规则引擎

摘要： json-rules-engine 是一个node 的基于json 规则引擎，使用上比较简单，但是提供了不少方便的能力包含的特性基于json 进行规则描述支持ALL，ANY 等布尔操作快速安全，没有使用eval 函数同构，支持node 以及浏览器轻量级，只包含了少量依赖一些术语里边阅读全文

posted @ 2024-11-25 08:00 荣锋亮阅读(342) 评论(0) 推荐(0)

UniversalMediaServer DLNA&Upnp & http 媒体服务

摘要： UniversalMediaServer 是一个强大的媒体服务，支持DLNA，Upnp，http 协议说明 UniversalMediaServer 使用了ffmpeg，mediainfo，opensubtitles，crowdin，mencoder，tsmuxer，avisynth，vlc 等开阅读全文

posted @ 2024-11-24 08:00 荣锋亮阅读(110) 评论(0) 推荐(0)

crux 基于rust 的跨平台app开发框架

摘要： crux 使用了shared core 的模式进行跨平台app 开发，其中core 部分是基于rust 开发的包含的特性 shared core thin shell ui 层类型生成能力，提供了暴露api 调用的能力（side effects）参考架构如下图，设计上类似guide sid 阅读全文

posted @ 2024-11-23 08:00 荣锋亮阅读(111) 评论(0) 推荐(0)

multi-agent-orchestrator aws 开源的多agent 调度框架

摘要： multi-agent-orchestrator 是aws 开源的多agent 调度框架包含的特性多agent 调度多语言支持，目前支持python 以及typescript 包含智能意图分类，可以方便的基于查询以及动态路由灵活的agent 响应，支持流以及非流出来支持上下文管理，可以方便阅读全文

posted @ 2024-11-22 21:51 荣锋亮阅读(300) 评论(0) 推荐(0)

cefsharp 集成chrome 到.net 应用中的框架

摘要： cefsharp 集成chrome 到.net 应用中的框架，实际上提供了win form 以及wpf 组件包含的特性 js与.net 的互调用，以及基于回调的事件处理编程方式调用devtools 基于cefsharp 的puppeteer 的dom 访问基于Chromium.AspNetCo 阅读全文

posted @ 2024-11-22 08:00 荣锋亮阅读(61) 评论(0) 推荐(0)

dora面向数据流的机器人编程框架

摘要： dora面向数据流的机器人编程框架，基于rust 开发，对于内部基于了zenoh 这个网络框架包含的特性零开销，基于了arrow 可扩展，支持单机以及分布式，同时基于了yaml进行定义快速原型开发内置可观测，支持log，trace，metrics 多语言支持，比如python，rust，c，阅读全文

posted @ 2024-11-21 08:10 荣锋亮阅读(225) 评论(0) 推荐(0)

geesefs s3 fuse 文件系统实现

摘要： geesefs s3 fuse ，相比其他解决方案，geesefs 支持异步以及并行聚合说明 geesefs 对于yandex 对象存储，amazon s3，cepg，minio，selectel s3，backblaze b2 ，openstack swift，azure blob storag 阅读全文

posted @ 2024-11-21 08:00 荣锋亮阅读(184) 评论(0) 推荐(0)

mikro-orm typescript ORM 框架

摘要： mikro-orm 是一个基于ts 的orm 框架，使用了data mapper ，unit of work，identity map 等模式，支持mongodb，mysql，mariadb，pg，sqlite 等包含的特性隐式事务处理 DRY 实体支持sql 以及nosql 支持schema 阅读全文

posted @ 2024-11-20 08:00 荣锋亮阅读(119) 评论(0) 推荐(0)

Orbital 自动集成平台

摘要： Orbital 自动集成平台，Orbital 基于了Taxi 使用了语义元数据理念包含的特性不需要编写额外代码进行集成 api 优先技术无关，支持grpc，rest，kafka，soap 等自动适配参考玩法如下图，使用上与对于语义元数据定义是一致的，首先基于Taxi定义模型契约，然后业务阅读全文

posted @ 2024-11-19 10:12 荣锋亮阅读(41) 评论(0) 推荐(0)

cookiecutter-data-science 基于cookiecutter数据科学项目模版

摘要： cookiecutter-data-science 基于cookiecutter数据科学项目模版说明 cookiecutter-data-science 属于项目工程化的最佳实践，kedro 也是一个很不错的项目实践，值得尝试下参考资料 https://cookiecutter-data-sci 阅读全文

posted @ 2024-11-18 08:00 荣锋亮阅读(41) 评论(0) 推荐(0)

promptic 简单基于python 的llm 包

摘要： promptic 是基于litellm 开发的一个简单llm 包包含的特性基于装饰器的集成参数模版 pydantic 模型支持 streaming 支持简单llm 交互说明当然使用promptic 作为结构化输出也是一个不错的选择，代码并不多，可以看看参考资料 https://gith 阅读全文

posted @ 2024-11-17 08:00 荣锋亮阅读(40) 评论(0) 推荐(0)

electron视频音频处理简单说明

摘要：属于一个总结，一般我们都是使用navigator.mediaDevices.getUserMedia+desktopCapturer 集成，但是getUserMedia 对于音频的捕捉是有一些问题的（audio 为true 会有bug）基于session setDisplayMediaReques 阅读全文

posted @ 2024-11-16 08:00 荣锋亮阅读(204) 评论(0) 推荐(0)

fiddler proxy 解决服务器上网问题&https抓包问题

摘要：属于一个简单但是常见的问题，以前介绍过基于ssh 远端转发模式，实际上我们可以将fiddler 作为proxy 进行请求处理使用fiddler 的好处是简单，而且还支持debug，可以解决接口访问调试的问题运行可以使用fiddler 经典，或者everywhere，之后就是配置策略开启远端转阅读全文

posted @ 2024-11-15 08:00 荣锋亮阅读(65) 评论(0) 推荐(0)

ssh 远端转发处理服务器外网访问问题

摘要：属于一个简单而且比较常见的场景，就是我们的服务器不能直接链接互联网，但是我们的服务器可以访问内网，内网有一个proxy 服务解决方法第一种就是我们直接配置proxy 可以是socks 或者http的，参考配置，比较适合的是我们的服务器可以直接访问内部proxy export http_prox 阅读全文

posted @ 2024-11-14 00:49 荣锋亮阅读(98) 评论(0) 推荐(0)

LitServe fastapi endpoint注册简单说明

摘要： LitServe 是基于fastapi 开发的，因为服务ai 模型的特殊性（一般都比较耗时，运行时间会比较长），LitServe 对于api endpoint 的注册并不是简单的处理，而是包含了一个自己的spec，基于此spec 实现灵活的定义（比如支持openai 兼容模式）参考注册 spec 阅读全文

posted @ 2024-11-13 08:00 荣锋亮阅读(94) 评论(0) 推荐(0)

Photino 轻量级跨平台应用开发框架

摘要： Photino 属于一个新的跨平台app 开发方案包含的特性支持基于c++，c# ，java 的native 编译跨平台ui，可以基于vue，react，angular，blazor，Photino 使用了os 内置的chromium 或者基于webkit 的浏览器轻量级，相比electro 阅读全文

posted @ 2024-11-13 08:00 荣锋亮阅读(325) 评论(0) 推荐(0)

py-filelock python 平台无关的文件锁

摘要： py-filelock 是一个平台无关的文件锁实现，可以用来实现一些基于文件锁的业务控制参考使用 lock.py import os from filelock import Timeout, FileLock file_path = "high_ground.txt" lock_path = " 阅读全文

posted @ 2024-11-12 08:00 荣锋亮阅读(109) 评论(0) 推荐(0)

fastapi uvicorn 多进程处理

摘要： uvicorn 对于多进程的支持可以通过配置wokers 参数，但是一般我们都使用的是模块类模式，并不是字符串（只有字符串模式才能生效）以下是基于multiprocessing 如何实现类似的功能（机制上实际与uvicorn 的多worker是类似的）参考代码 import multiproce 阅读全文

posted @ 2024-11-11 08:00 荣锋亮阅读(1230) 评论(0) 推荐(0)

jsonargparse python cli 开发库

摘要： jsonargparse 是一个python cli 库，尽管不如其他库火（click）目前Lightning cli 就使用了此库包含的特性自动创建cli 类似Fire，typer，Clize以及Tyro 支持类型校验支持通过配置文件或者环境变量的配置解析（集成confuse，configa 阅读全文

posted @ 2024-11-10 08:00 荣锋亮阅读(118) 评论(0) 推荐(0)

LitServe 服务多worker启动简单说明

摘要： LitServe 是一个基于fastapi 包装的快速推理api 服务，以下只简单说明下关于server 启动部分的处理参考使用我们可以通过配置devices 以及每个device 对应的worker 数执行以那种模式进行server 的启动（多线程还是多进程）参考使用 if __name__ 阅读全文

posted @ 2024-11-09 08:00 荣锋亮阅读(223) 评论(0) 推荐(0)

LitServe 快速部署类openai 接口服务

摘要：以前简单说明过LitServe 支持openai 接口格式的服务api，以下是一个简单试用参考代码 app.py import litserve as ls class SimpleLitAPI(ls.LitAPI): def setup(self, device): self.model = N 阅读全文

posted @ 2024-11-08 08:00 荣锋亮阅读(208) 评论(0) 推荐(0)

LitServe 快速进行ai 模型服务的引擎

摘要： LitServe 是一个使用简单的基于fastapi 开发方的ai 服务引擎，支持批处理以及streaming 模式包含的特性灵活的扩展能力，支持callback 以及中间件模式，对于request 以及response 进行修改完全控制，可以运行单个或者多个模型进行推理服务构建组合ai 系阅读全文

posted @ 2024-11-07 08:00 荣锋亮阅读(136) 评论(0) 推荐(0)

anyio 高级异步并发网络库

摘要： anyio 是一个异步网络以及并发库，可以与asyncio 以及trio 工作，实现了类似trio 的sc 模式包含的特性任务组能力高级tcp/udp，以及unix 套接字支持多种字节流以及对象流api 支持内部任务同步以及通信支持（锁、条件、事件、信号量、对象流）工作者线程支持子进程阅读全文

posted @ 2024-11-06 08:00 荣锋亮阅读(457) 评论(0) 推荐(0)

pg_ivm pg 增量物化视图扩展

摘要： pg_ivm 是一个强大的pg 增量物化视图扩展，可以实现物化数据的自动更新（创建物化之后会创建一些触发器实现自动更新），当然也包含了函数可以支持手工更新说明 pg_ivm 很强大，很方便，但是依然有一些限制，比如基表必须是简单表，不能使用视图，继承父表，分区表，分区以及外部表视图定义查询中不能阅读全文

posted @ 2024-11-05 08:00 荣锋亮阅读(150) 评论(0) 推荐(0)

HAProxy Data Plane API 3.0 发布

摘要：就在最近haproxy data plane api 3.0 发布了，相对以前有不少变动，官方发布了release note 很值得看看说明对于基于haproxy 进行业务负载均衡以及动态配置管理的haproxy data plane api 是一个很不错的选择，对于早期版本的一些使用我有简单介阅读全文

posted @ 2024-11-04 08:00 荣锋亮阅读(79) 评论(0) 推荐(0)

ossfs 禁用cache配置说明

摘要： ossfs 基于oss sdk 实现了与oss fs类似的能了，但是默认是有cache 的，尤其我们的long running 任务可能会影响，造成获取的数据是不是最新的，解决方法就是直接禁用cache 参考处理 # 通过临时调整cache有效期解决from ossfs import OSSFile 阅读全文

posted @ 2024-11-03 08:00 荣锋亮阅读(63) 评论(0) 推荐(0)

paradedb 基于pg 的搜索以及分析方案

摘要： paradedb 是一个替换es 的可选方案包含的能力搜索，支持基于BM25（基于pg_search）的全文检索，以及pgvector 的向量处理，以及混合搜索分析，基于pg_analytics 的分析查询引擎支持自托管模式部署支持特殊工作负载场景，postgis，pg_cron, pg 阅读全文

posted @ 2024-11-02 08:00 荣锋亮阅读(368) 评论(0) 推荐(0)

rq job timeout 配置简单说明

摘要：默认rq 是180s 的超时处理，但是我们可以自己调整，注意官方有好几个参数，timeout 以及job_timeout 应该使用job_timeout 参考配置 job 级别的 q.enqueue(mytask, args=(foo,), kwargs={'bar': qux}, job_time 阅读全文

posted @ 2024-11-01 08:00 荣锋亮阅读(70) 评论(0) 推荐(0)

tldraw 创建基于web 白板的sdk 框架

摘要： tldraw 创建基于web 白板的sdk 框架包含的特性 react canvas 高性能实时协作媒体支持灵活的自定义说明 tldraw 从3.0 开始调整累了许可模式，以前是商业使用需要有license，现在是可以直接使用了，但是会保留水印，对于开发白板应用的tldraw 是一个很值得阅读全文

posted @ 2024-10-31 08:00 荣锋亮阅读(204) 评论(0) 推荐(0)

rill 基于duckdb 的快速bi 工具

摘要： rill 是基于duckdb 的快速bi 工具参考架构包含了提取，加载，查询，过滤，包含了etl，内存存储，以及操作型bi 说明 rill server 基于golang 开发，web 上使用了Sveltekit，rill 设计上很值得学习参考，抽象了不少自己的yaml schema 灵活性上很阅读全文

posted @ 2024-10-30 08:00 荣锋亮阅读(207) 评论(0) 推荐(0)

cloudpathlib 简单试用

摘要：通过minio 作为s3 存储进行测试 s3 准备 docker-compose version: "3" services: s3: image: minio/minio:latest ports: - 9000:9000 - 9001:9001 command: server /data --c 阅读全文

posted @ 2024-10-29 08:00 荣锋亮阅读(29) 评论(0) 推荐(0)

cloudpathlib 面向云存储的python pathlib 风格的数据处理

摘要： cloudpathlib 是模仿了python pathlib 接口格式的python 库，可以用来方便的进行云存储的数据处理包含的特性与path 方式类似的访问支持s3，gcs，azure ，ftp 也在开发中可扩展读写支持无缝的cache 支持，可以按需进行cache 的处理方便测阅读全文

posted @ 2024-10-28 08:00 荣锋亮阅读(32) 评论(0) 推荐(0)

stamina 生产级的python 重试包

摘要： stamina 是基于tenacity的包装包含的特性仅对某些异常（甚至是其中的子集）进行重试，方法是先使用谓词进行自检重试之间带有抖动的指数退避限制重试次数和总时间自动异步支持-包括Trio 保留所装饰的可调用函数的类型提示开箱即用，可灵活使用Prometheus、structlog和阅读全文

posted @ 2024-10-27 08:00 荣锋亮阅读(33) 评论(0) 推荐(0)

dremio 25.2 软件包以及github 源码更新了

摘要：昨天我说了dremio 发布了25.2 提供了新的catalog 支持，之后过了一段时间dremio同时也提供了软件包以及github 源码的更新说明 25.1 版本构建关于dremio-js 的私服问题在这次代码中也看到解决了，新功能代码可以看看参考资料 https://github.com 阅读全文

posted @ 2024-10-26 08:13 荣锋亮阅读(70) 评论(0) 推荐(0)

导航

公告