摘要: 强化学习 (2) —— 马尔科夫决策过程 强化学习中的环境一般就是一个马尔科夫决策过程。 马尔科夫决策过程包含状态信息以及状态之间的转移机制,如果用强化学习去解决一个实际问题,第一步就是把这个问题抽象成一个马尔科夫决策过程。 马尔科夫过程 随机过程: 概率论的动力学部分。传统概率论内容研究的是静态的 阅读全文
posted @ 2026-07-09 02:06 BorisDimitri 阅读(2) 评论(0) 推荐(0)
摘要: 探索与利用的平衡 \(\epsilon\) 贪心算法 在贪心采取每一时刻奖励估值最大的动作的基础上,加入了一个随机参数 \(\epsilon\) 。 每次以概率 $1-\epsilon $ 选择期望奖励最大的那个动作(利用),以概率 $\epsilon $ 来随机选取一根拉杆(探索)。 如果 $\e 阅读全文
posted @ 2026-07-02 13:03 BorisDimitri 阅读(2) 评论(0) 推荐(0)
摘要: 在 Buildroot 基础开发工作流 的基础上,部署 AMP(Asymmetric Multi-Processing)——Linux (CPU0) + RT-Thread (CPU2),通过 RPMSG 跨核通信。 前置条件:已按 basic_blog.md 完成 Docker 环境、Buildr 阅读全文
posted @ 2026-06-11 21:33 BorisDimitri 阅读(50) 评论(0) 推荐(0)
摘要: 本文涵盖从零搭建 Docker 开发环境、编译 Buildroot 系统、烧录、以太网直连 SSH 的完整流程。阅读本文后你将得到一个可以通过 SSH 登录的 Linux 系统。进阶内容(AMP 多核异构部署)见 AMP 开发记录。 环境 项目 说明 开发板 Luckfox Lyra Plus (R 阅读全文
posted @ 2026-06-11 16:44 BorisDimitri 阅读(23) 评论(0) 推荐(0)
摘要: 背景 我有一块 FriendlyElec NanoPi M6,搭载 Rockchip RK3588 SoC。目标是搭建一个 Docker 化的交叉编译环境,编译 Buildroot 并启动自制的 Linux 系统。 获取源码 从 FriendlyElec 下载站 下载: 文件 大小 说明 build 阅读全文
posted @ 2026-06-06 14:47 BorisDimitri 阅读(27) 评论(0) 推荐(0)
摘要: 环境信息 宿主机:Ubuntu (x86_64) Docker 镜像:luckfox-sdk:22.04 基础系统:Ubuntu 22.04 LTS SDK 版本:Luckfox_Lyra_SDK_250815 (kernel 6.1, buildroot 2024.02) 关键路径 项目 路径 D 阅读全文
posted @ 2026-06-06 00:14 BorisDimitri 阅读(28) 评论(0) 推荐(0)
摘要: 可行方案 流路径: RPi4(Buildroot, 内核 6.12.61)→ Ubuntu PC,RTP/UDP over WiFi 编码格式: MJPEG(VPU 硬件 JPEG 编码器)。H.264 在当前内核/固件组合下不可用——见问题 #6。 发送端流水线(RPi4) gst-launch- 阅读全文
posted @ 2026-05-26 13:50 BorisDimitri 阅读(19) 评论(0) 推荐(0)
摘要: 硬件背景 树莓派 4B 使用 CYW43455 芯片,这是一颗 WiFi + 蓝牙二合一芯片: WiFi 通过 SDIO 连接,驱动为 brcmfmac 蓝牙 通过 UART 连接,驱动为 hci_uart + Broadcom 协议 RPi 4B 有两个 UART:PL011(ttyAMA0)和 阅读全文
posted @ 2026-05-22 00:04 BorisDimitri 阅读(24) 评论(0) 推荐(0)
摘要: Esential tools sudo apt install build-essential bison flex gawk texinfo file git ssh libc6-dev libssl-dev libncurses-dev Install the buildroot git clo 阅读全文
posted @ 2026-05-06 14:59 BorisDimitri 阅读(24) 评论(0) 推荐(0)
摘要: 背景 本人校内赛中想实现树莓派回传PC,在PC上完成yolo,再实现数据回传。 技术路径 本人发现树莓派中有专门的VPU (Video Processing Unit),用来做视频硬解。 VPU的处理几乎独立,相较于软解几乎不占用 CPU。 gStream是一个基于插件和pipeline的传输框架。 阅读全文
posted @ 2026-02-23 02:28 BorisDimitri 阅读(71) 评论(0) 推荐(0)