在ML训练中使用BFGS和L-BFGS准牛顿法结合Wolfe线搜索实现可扩展非凸优化
针对ML训练循环中的非凸优化,详解BFGS/L-BFGS准牛顿方法与Wolfe线搜索的工程实现,提供可落地参数、监控清单与风险规避策略。
Latest Essays
继续沿着时间线阅读近期的工程实践与技术观察。
近期的思考与工程笔记。
针对ML训练循环中的非凸优化,详解BFGS/L-BFGS准牛顿方法与Wolfe线搜索的工程实现,提供可落地参数、监控清单与风险规避策略。
Langjam 7 天游戏 Jam 下,自举最小树遍历解释器实现玩具语言解析与游戏逻辑求值,聚焦词法语法评估器工程参数、GameJam 时间约束优化与简单 Roguelike 示例。
针对Sentinel-1D高分辨率SAR图像处理,详述双极化5m分辨率校准流程、波束apodization参数优化及星座干涉基线配置,实现精密地表监测。
利用FreeBSD ports/pkg构建系统、jails轻量虚拟化及ZFS弹性存储,实现高效、安全的系统部署,避免Docker额外开销。
在 PB 级 Salt 配置日志中,实现 scalable 罕见 highstate 失败检测:本地缓存、Blame 模块查询与多数据中心自动化 triage 参数。
Milvus 以 DiskANN 索引为核心,支持 hybrid search 和 multi-vector 过滤,面向亿级 AI 嵌入检索,给出工程化部署参数与监控要点。
Memori多代理LLM系统中工程化语义检索去重与跨代理同步协议,模拟LSM分级压缩,提升日志合并效率与查询性能。
通过 BGP 网关位置、traceroute RTT 和 IP 数据库对比,评估 Starlink 终端定位偏差,提供测量脚本与阈值参数。
VERL 框架下 FSDP 多 GPU 分片在 KL-PPO RLHF 中的工程实践,详解通信重叠机制、阈值调优参数及可扩展训练管道。
基于 Arch Linux 的 CachyOS,通过 BORE 调度内核、LTO 编译与 x86-64-v3/v4 优化,支持游戏和工作站模块化高性能构建。
Traefik 通过 Providers 实现 Docker/K8s 等自动服务发现,支持动态路由、Let's Encrypt HTTPS 与 WASM TCP/UDP 扩展,提供负载均衡参数配置与部署清单。
利用Microsoft Call Center AI,通过API触发AI代理拨打电话,支持实时对话、数据收集与Azure集成,实现电话中心高效自动化。
ETH苏黎世联邦理工数字设计课程lab详解:Chisel HDL实现RISC-V乱序处理器pipeline,出序执行关键参数,FPGA验证工程化流程与监控清单。
在 Claude 中运用 Markdown-wrapped 提示,实现可靠的 XML 结构化输出、工具调用稳定性,并生成工件避免 JSON 解析脆弱性,提供工程参数与清单。
Google ADK-Go 通过代码优先方式构建 AI 代理,重点实现会话检查点持久化、遥测追踪与长运行评估管道控制,提供工程参数与监控清单。
PoT prompting 利用 LLM 生成 Python 代码实现数值推理,平均提升 12%,结合 self-consistency 达 SOTA,提供提示模板与监控要点。
实现 PoT 通过 LLM 生成可执行 Python 程序并递归自调试,提升复杂数学逻辑任务准确率超 CoT 15%,附工程参数与监控清单。
剖析 iptv-org/iptv 项目 TypeScript 脚本:每日并发处理 10 万+ 全球公开 M3U 源的关键参数、阈值与优化策略,确保高效聚合可靠频道。
基于 iptv-org/iptv 项目,详解 TypeScript 脚本每日处理 10 万+ 全球 M3U IPTV 源的管道设计,包括并发抓取、流验证、URL 去重与分类参数。
基于HTML5 Canvas的Verlet积分物理引擎,支持约束、碰撞检测与实时互动弹力球,提供核心参数配置与性能优化清单。