04 2025 档案

dremio 26 版本发布
摘要:实际上dremio 26 已经大概发布了有半个月了,就在今天提供了ce版本的软件包以及docker镜像,但是目前源码暂时未提供 一些相对比较重要的新特性(ce 版) arrow flight sql 支持预编译sql 了 (注意flight-sql-jdbc-driver 需要17 以及以上,目前测 阅读全文

posted @ 2025-04-30 16:48 荣锋亮 阅读(101) 评论(0) 推荐(0)

zenoh pico 集成esp32 开发板简单试用
摘要:主要是一个简单测试,通过platformio 进行esp32 开发集成zenoh pico 环境准备 安装vs code 以及platformio 扩展 比较简单,直接下载vs code 之后就是选择platformio 插件,安装就可以了 zenoh 服务 docker run -d -p 744 阅读全文

posted @ 2025-04-30 07:23 荣锋亮 阅读(78) 评论(0) 推荐(0)

glider 简单试用
摘要:以前简单说过glider 的功能,以下是一个简单试用 安装 glider github 中提供了不同系统的安装包可以直接下载使用 配置 简单http&socket5 模式 直接复用glider 模式的配置 ./glider -config config/examples/1.simple_proxy 阅读全文

posted @ 2025-04-29 08:53 荣锋亮 阅读(62) 评论(0) 推荐(0)

glider 多协议转发代理工具+dns/dhcp+ ipset 管理服务
摘要:glider是基于golang 开发的一个多协议代理工具,同时包含了dns 以及dhcp 能力,还支持基于ipset 的管理特性(类型dnsmasq) 包含的特性 可以同时作为proxy client 以及server 灵活的proxy 以及协议连支持 支持多样的lb 算法 支持基于规则以及优先级的 阅读全文

posted @ 2025-04-28 08:00 荣锋亮 阅读(102) 评论(0) 推荐(0)

zenoh pico 支持raspberry pi pico
摘要:zenoh pico 支持raspberry pi pico了,内部基于raspberry pi pico sdk ,同时可以方便的与freertos 集成 说明 zenoh pico 已经支持不少嵌入式小板了,值得尝试下 参考资料 https://zenoh.io/blog/2025-01-08- 阅读全文

posted @ 2025-04-27 08:00 荣锋亮 阅读(25) 评论(0) 推荐(0)

orange pi 5b wifi ap 创建以及systemd 服务配置简单说明
摘要:orange pi 5b 支持wifi ,同时可以创建ap 热点,以下是一个简单的使用说明 创建ap 热点命令 命令参数 比较全了解可以方便使用 Usage: create_ap [options] <wifi-interface> [<interface-with-internet>] [<acc 阅读全文

posted @ 2025-04-26 08:00 荣锋亮 阅读(61) 评论(0) 推荐(0)

chainlit 2.0 试用
摘要:就是对于chanlit 2.0 的一个试用,测试下对于sqlite 的支持 环境准备 docker-compose 主要是部署minio s3,可选的 services: minio: image: minio/minio command: server /data --console-addres 阅读全文

posted @ 2025-04-25 08:00 荣锋亮 阅读(82) 评论(0) 推荐(0)

browser-use cdp 协议支持的配置
摘要:主要是对于配置的一个简单说明 参考代码 核心是bwoser 对象的配置 agent = Agent( task="Navigate to https://cnblogs.com/rongfengliang, 总结最近博客内容", llm=llm, controller=Controller(), b 阅读全文

posted @ 2025-04-24 08:00 荣锋亮 阅读(140) 评论(0) 推荐(0)

browser-use 基于LLM 的web 内容搜索agent
摘要:browser-use 基于LLM 的web 内容搜索agent,可以方便的进行web content 内容的处理,同时新版本已经支持cdp协议了,可以不用本地通过playwright install 安装浏览器了 说明 browser-use 是很不错,但是目前测试ollama 以及deepsee 阅读全文

posted @ 2025-04-23 08:00 荣锋亮 阅读(66) 评论(0) 推荐(0)

litserve 的callback 以及中间件简单说明
摘要:对于中间件实际上就是fastapi 内部或者starlette的一些能力,使用比较简单,callback 比较有用 中间件使用 参考 from starlette.middleware.cors import CORSMiddleware import litserve as ls if __nam 阅读全文

posted @ 2025-04-22 08:00 荣锋亮 阅读(14) 评论(0) 推荐(0)

litserve 的认证机制简单说明
摘要:litserve 已经内置了认证能力可以通过token(环境变量模式)以及通过自定义请求头 模式 内部token 模式 LIT_SERVER_API_KEY=A_SECRET_KEY python server.py 访问 import requests # Define the API key i 阅读全文

posted @ 2025-04-21 08:00 荣锋亮 阅读(34) 评论(0) 推荐(0)

blinker 简单试用
摘要:以前简单说过blinker的能力,以下是一个简单试用说明 简单试用 app.py from blinker import signal # 定义发送的 class Processor: def __init__(self,name): self.name = name def go(self, da 阅读全文

posted @ 2025-04-20 08:00 荣锋亮 阅读(25) 评论(0) 推荐(0)

onnx-simplifier 简化onnx 的工具
摘要:onnx-simplifier 对于onnx 模型进行了一些优化,省去了生成的一些复杂操作,目前也有不少模型使用到此工具 说明 onnx 格式的模型文件在实际业务中使用率还是很高的,结合onnx-simplifier 工具对于模型进行一些精简操作还是很有用的,值得试用下 参考资料 https://g 阅读全文

posted @ 2025-04-19 08:00 荣锋亮 阅读(302) 评论(0) 推荐(0)

milvus-lite lite 版本的milvus
摘要:milvus-lite 属于轻量级版本的milvus,提供了与milvus基本一致的体验,通过pymilvus 我们可以直接使用(指定地址为文件,而不是url) 支持的特性 功能上,包含了insert,upsert,向量数据持久化以及集合管理,密集、稀疏、混合向量搜索、元数据过滤、多向量支持 索引类 阅读全文

posted @ 2025-04-18 08:00 荣锋亮 阅读(264) 评论(0) 推荐(0)

litserve 的多endpoint 处理
摘要:默认litserve在处理的时候只支持一个endpoint 但很多时候我们可能需要配置多个,比如推理服务多个地址,或者同时希望基于litserve 添加一些其他endpoint 进行接口提供(配置以及信息维护的),目前来说是有方法进行配置管理上的多endpoinnt(通过litserve内部包装的f 阅读全文

posted @ 2025-04-17 08:00 荣锋亮 阅读(41) 评论(0) 推荐(0)

sql-flow 基于duckdb 的流数据处理工具
摘要:基于duckdb 的流数据处理,支持基于sql 的kafka stream处理,同时也支持webhooks 使用场景 stream 数据转换,清理以及发布新数据类型 stream 数据增强,添加新的,并发布新数据 数据聚合,聚合输入数据进行批处理,减少数据大小 时间窗口支持 支持webhook so 阅读全文

posted @ 2025-04-16 08:00 荣锋亮 阅读(109) 评论(0) 推荐(0)

socketify websocket 简单试用
摘要:内容来自官方示例,主要是体验下webssocket的发布订阅能力 参考代码 app.py from socketify import App, CompressOptions def ws_open(ws): print("A WebSocket got connected!") # Let thi 阅读全文

posted @ 2025-04-15 08:00 荣锋亮 阅读(20) 评论(0) 推荐(0)

socketify 高性能web框架
摘要:socketify 是一个支持pypy3 以及python3的高性能web 框架,支持http 以及websockets 协议 包含的特性 对于websocket 扩展了pub/sub 协议 快速可靠的http以及https 跨平台支持 支持pypy3 以及cpython 基于通配符的动态url 路 阅读全文

posted @ 2025-04-14 08:00 荣锋亮 阅读(32) 评论(0) 推荐(0)

diskcache 简单试用
摘要:对于diskcache的特性以前简单介绍过 参考使用 diskcache 包含了好几种类型,比如默认的Cache,支持分片的FanoutCache,Django 兼容的,支持的操作包含了get,set,incr,decr add,delete,pop,touch,evict,clear,reset, 阅读全文

posted @ 2025-04-13 08:00 荣锋亮 阅读(77) 评论(0) 推荐(0)

blinker python 进程级的信号以及事件处理包
摘要:blinker python 进程级的信号以及事件处理包, 可以用来实现一些业务操作解耦 包含的特性 注册全局信号名 匿名信号 自定义注册名称 永久以及临时连接接受者 基于弱引用的自动关闭接受者 发送任意数据 收集来自信号的返回值 线程安全 提供了基于装饰器的方便处理 支持异步接受者 说明 blin 阅读全文

posted @ 2025-04-12 08:00 荣锋亮 阅读(41) 评论(0) 推荐(0)

diskcache 基于磁盘的python cache包
摘要:diskcache 是一个使用磁盘作为底层存储的python cache 包兼容Django 的cache模式 包含的特性 纯python 文档完整 进行了相对全面的性能比较 100% 代码覆盖 进行了小时级别的压力测试 Django 兼容的api 线程以及进程安全 支持lru以及lfu 策略 ke 阅读全文

posted @ 2025-04-11 08:00 荣锋亮 阅读(131) 评论(0) 推荐(0)

pathway 简单试用
摘要:注意pathway 智能在linux以及mac系统中运行 试用 基于了官方提供的简单示例 安装 最好使用虚拟环境 pip install pathway app.py 实际上就是一个读取sum_input_data 目录里边的csv内容,然后汇总计算总和 import pathway as pw c 阅读全文

posted @ 2025-04-10 08:00 荣锋亮 阅读(41) 评论(0) 推荐(0)

pathway python 流处理ETL框架
摘要:pathway python 流处理ETL框架,可以用来进行实时分析以及LLM pipeline,rag 等 包含的特性 超过300+ 的connectors,包含了不同领域的集成,db,api,分布式存储,文件系统等,同时可以灵活的进行开发 支持无状态以及有状态的转换处理 任务状态持久化,可以对于 阅读全文

posted @ 2025-04-09 08:00 荣锋亮 阅读(126) 评论(0) 推荐(0)

httpimport 内部处理简单说明
摘要:以前也简单说明了下httpimport 的功能。实际内部是对于python import 语义的实现,只是没有明确的基于继承的模式 标准模块finder 以及loader 的处理 由importlib.abc.Loader 以及importlib.abc.MetaPathFinder定义的 clas 阅读全文

posted @ 2025-04-08 08:00 荣锋亮 阅读(28) 评论(0) 推荐(0)

browser-use方便提取web内容的ai agent
摘要:browser-use 内部实际上是利用了langchain+playwright 进行的浏览器内容自动处理 agent 包含的特性 视觉+html 提取 自动多页签管理 基于xpath的llm action 内容提取 可以添加自定义action (保存文件,同时,数据库存放) 自关联 使用任何la 阅读全文

posted @ 2025-04-07 08:00 荣锋亮 阅读(69) 评论(0) 推荐(0)

httpimport 简单试用
摘要:以前简单说明过httpimport 的功能,以下尝试下使用,同时对于问题做一些简单的说明 参考代码 app.py import httpimport with httpimport.pypi_repo(): from hashids import Hashids print(Hashids.__di 阅读全文

posted @ 2025-04-06 08:00 荣锋亮 阅读(16) 评论(0) 推荐(0)

httpimport 通过https 加载远程python 模块的包
摘要:httpimport 这个包比较有意思,弥补了python 缺少通过http 协议加载模块的能力(类似deno 加载模式) 支持的加载模式 http pypip github 支持归档模式的包 支持任何基于http的包 一些配置 httpimport还支持基于profile 的配置,可以进行一些自定 阅读全文

posted @ 2025-04-05 08:00 荣锋亮 阅读(17) 评论(0) 推荐(0)

lance 集成minio 简单试用
摘要:属于一个简单试用,学习下内部处理以及集成minio 参考代码 app.py import lance import pyarrow as pa import duckdb new_table = pa.Table.from_pylist([{"name": "Bob", "age": 30}, {" 阅读全文

posted @ 2025-04-04 08:00 荣锋亮 阅读(66) 评论(0) 推荐(0)

lance 基于rust 开发的方便ml&&llm的现代列式数据格式
摘要:lance 基于rust 开发的方便ml&&llm的现代列式数据格式 包含的特性 高性能的随机访问 向量搜索 令拷贝,自动版本化 生态集成,apache arrow 周边的 说明 lancedb 内部就是基于此进行的向量处理,lance 支持各类存储,可以实现灵活的扩展,同时也可以很好的与panda 阅读全文

posted @ 2025-04-03 08:00 荣锋亮 阅读(239) 评论(0) 推荐(0)

sqlflite 一个参考flight sql server 实现
摘要:sqlflite 是一个参考flight sql server 实现,内部可以使用duckdb 以及sqlite 等数据库 参考使用 docker-compose 文件 services: db: image: voltrondata/sqlflite:latest ports: - 31337:3 阅读全文

posted @ 2025-04-02 08:00 荣锋亮 阅读(28) 评论(0) 推荐(0)

修复flight-sql-js-client 支持连接dremio
摘要:flight-sql-js-client 是基于grpc+ arrow flight 的原生arrow flight sql client,上次我也说过连接dremio 是有问题的,通过实际上的分析(结合wireshark 以及jave remote debug) 发现实际的请求是可以处理成功的,而 阅读全文

posted @ 2025-04-01 08:00 荣锋亮 阅读(26) 评论(0) 推荐(0)

导航