开源项目OpenRLHF:0.9.3新增序列级TISOpenRLHF/OpenRLHFOpenRLHF·来源日期:2026.02.04模型训练强化学习收藏概述OpenRLHF是开源的大模型强化学习训练框架,提供训练指南与脚本,面向做RLHF等对齐训练的工程师,采用Apache-2.0许可。0.9.3新增序列级TIS,将重要性采样细化到序列粒度,属于训练算法层面的机制变化,而不只是参数或接口调整。对调优对齐训练的团队,这提供了新的算法选项,方法也具有跨任务复用价值,可在既有训练流水线中直接评估启用。