使用 LeRobot 细调扩散策略实现灵巧操纵
本文探讨如何利用 LeRobot 框架在机器人数据集上细调 Diffusion Policy,支持灵巧操纵任务,并集成真实硬件进行端到端部署。提供配置参数、训练清单和监控要点。
Latest Essays
继续沿着时间线阅读近期的工程实践与技术观察。
近期的思考与工程笔记。
本文探讨如何利用 LeRobot 框架在机器人数据集上细调 Diffusion Policy,支持灵巧操纵任务,并集成真实硬件进行端到端部署。提供配置参数、训练清单和监控要点。
探讨Mindustry中模块化瓦片自动化的工程实现,包括A*路径查找算法、资源流模拟机制,以及确定性多人同步策略,提供可落地参数与优化要点。
在 Solid.js 中使用信号实现高效的细粒度 UI 更新,减少重渲染,提升动态状态依赖的响应式 Web 应用的性能。
通过 Hugging Face 的 LeRobot 库,利用端到端学习从演示数据集训练机器人策略,支持硬件无关的政策,并在 PyTorch 中实现真实世界操纵任务的强化微调。
探讨 Gleam OTP 在 BEAM 上的分布式节点发现机制,实现无中心协调的自动 peer 加入与故障容错集群,形成可扩展的多核 actor 系统。
在 Open-Notebook 中利用模块化 LLM 链式调用,实现多轮互动播客生成,支持动态上下文传递和响应精炼,提供工程化参数和最佳实践。
在 Oma 中,利用细粒度锁机制和 YAML 配置动态调整并发阈值,减少多线程依赖解析中的锁争用,提供工程化参数和监控要点。
探讨 OpenVoice 通过 VAE 编码和风格令牌实现韵律与情感转移的技术细节,支持无语言特定再训练的表达性有声书合成,提供工程参数与落地指南。
集成 XTTSv2 实现 ebook2audiobook 的多语言语音克隆,支持 1100+ 语言的自然有声书生成与 fallback 策略。
在高速度系统中实现指数衰减加权于时间序列指标,用于异常检测,实现自适应阈值,淡化陈旧数据以减少假阳性。
在 Gleam OTP 中,利用 BEAM 兼容性实现热代码替换,确保多核节点上 Actor 的零停机更新,并通过状态保留机制维持服务连续性。
本文探讨如何将 PP-OCRv4 的布局分析模块集成到 RAG 管道中,从复杂扫描 PDF 中检测并提取表格和表单,使用自适应边界框合并和向量化技术,实现高效的结构化数据处理。提供工程化参数和落地清单。
在 Gleam OTP 中,利用原子状态快照和零停机移交协议,实现多核分布式系统中的无缝故障恢复。详述工程参数、监控要点与落地清单。
Bat 作为 cat 的增强工具,利用语法高亮、Git diff 检测和自动分页,提升终端文件查看效率。文章探讨其在 Unix 管道中的集成,包括行号显示和参数配置,帮助开发者优化工作流。
利用 Bat v0.26.0 的语法高亮、自动主题检测和分页功能,探讨终端中多文件 diff 的网格布局参数与代码审查最佳实践。
OMA 通过 YAML 配置优化 APT CLI,支持安全并行包解析、并发安装,减少锁文件依赖,提升 Linux 包管理效率。
工程化实现 ebook2audiobook 与 XTTSv2 的多说话者 TTS 管道,处理章节节奏、情感过渡及 1100+ 语言支持,实现最小 artifacts 的 audiobook 合成。
利用 DeepSeek-OCR 的视觉语言融合技术,从复杂文档图像中提取表格,解析布局生成带单元格合并和关系推理的 JSON 结构,适用于 LLM 输入优化。
面向可扩展文档处理,集成 DeepSeek OCR 的低延迟推理管道,涵盖布局分析、多语言文本提取及 GPU 批处理优化参数与监控策略。
基于 MiniMind 项目,构建从零训练小型 GPT 的 PyTorch 管道,包括自定义 BPE 分词、因果自注意力机制和基本 SGD 优化循环,实现消费级 GPU 上 2 小时内完成训练。