在 PyTorch Diffusers 中实现管道并行、LoRA 微调与自定义噪声调度器:可扩展图像/视频/音频生成工程实践
基于 Hugging Face Diffusers,阐述管道并行分布式推理、LoRA 高效微调及自定义噪声调度器的 PyTorch 实现,提供参数配置与优化清单。
Latest Essays
继续沿着时间线阅读近期的工程实践与技术观察。
近期的思考与工程笔记。
基于 Hugging Face Diffusers,阐述管道并行分布式推理、LoRA 高效微调及自定义噪声调度器的 PyTorch 实现,提供参数配置与优化清单。
剖析 Helix 编辑器中 Rust 实现的模态编辑机制,结合 Tree-sitter 语法树解析和 LSP 补全功能,提供高效代码编辑工作流的参数与导航要点。
探讨在Together AI平台上实现动态批处理以处理变长序列LLM请求,优化填充策略和多GPU分布,提升吞吐量而无需固定批大小。提供工程参数和监控要点。
使用现代C语言从零构建BASIC解释器,聚焦1980s兼容的字符串处理、内置数学函数实现,以及磁带模拟的工程化参数与监控要点。
在现代 C 中从头构建 BASIC 解释器,聚焦字符串处理、TAN/ATN 等数学函数以及磁带 I/O 仿真,提供具体参数与实现清单以实现精确的复古行为。
针对 GitHub Copilot 等 AI 编码工具的提示注入 RCE 漏洞(CVE-2025-53773),本文探讨通过 AST 验证解析提示结构、隔离执行沙箱运行代码片段的工程实践,提供参数配置、监控阈值和回滚策略,确保安全生成代码建议。
agent-shell v0.5 通过 ACP 协议优化工具调用链、会话状态管理和多步错误恢复,提供 Emacs 原生代理集成的工程参数与监控要点。
在Together AI的多GPU环境中,实现动态请求批处理与张量并行,优化变长序列推理,达到亚100ms延迟并比静态方法提升2倍吞吐,提供工程参数与监控要点。
探讨 MCP 协议在 ESP32 上的集成,实现低功耗 AI 聊天机器人的边缘部署与本地语音交互。
Qt 的 Meta-Object Compiler 通过预处理器生成元数据,实现 C++ 运行时自省与动态事件处理,提供信号槽机制的工程参数与最佳实践。
Together AI 通过在推测解码中应用内核融合技术,融合 attention 和 MLP 操作,显著降低内存带宽消耗,实现多 GPU 环境下 LLM 推理 4 倍加速。文章提供工程参数、阈值设置与监控要点。
基于 C# 和 Avalonia 框架,开发支持多模型 LLM 及 MCP 工具的桌面 AI 助手,实现屏幕上下文感知与工作流自动化,提供配置参数与部署清单。
探讨通过提示净化和沙箱技术防范GitHub Copilot等AI工具中的提示注入RCE风险,提供实用参数和实施指南。
基于 Evershop 平台,分析模块化 TypeScript 后端的设计,利用 GraphQL API 和插件系统实现扩展性,并结合 React SSR 优化 storefront 渲染。
深入剖析 CamoLeak 漏洞机制,通过提示注入绕过 GitHub Copilot 扩展隔离,利用不安全 API 调用泄露私有源代码,提供工程化防护参数与监控要点。
通过 regex 和 AST 解析实现运行时提示检查,检测并日志 GitHub Copilot 中的私有代码泄漏,支持取证审计和合规报告。
探索 Lobe Chat 的插件系统如何实现多模型 LLM 协调、文件 RAG 检索,以及通过 MCP 市场集成 artifact 渲染,提供工程化参数和部署指南。
Coze Studio 作为开源视觉平台,简化 AI 代理开发。通过拖拽工作流、集成 LLM 和插件工具链,实现高效调试与自动化部署,提供工程化参数与落地策略。
WinBoat 通过 Docker 容器和 RDP 协议实现 Windows 应用的原生集成,提供过程隔离和无缝 GUI,避免传统 VM 开销。
Bun 整合运行时与打包器,实现高效 JS 开发。本文分析其统一架构、关键参数配置及 Node.js 迁移实践。