3️⃣ Laya 【开源】 一个完全开源的、非自回归 System-One 决策模型家族,目前公开了三个 checkpoint: 英文 ModernBERT-large 421M 多语言 mmBERT-base 322M 面向 typed-decisions 的 421M 专用模型 权重、SDK、测试、benchmark、训练 notebook 都公开,Apache 2.0 作者提供的 fine-tuning notebook 包括数据构造、其所谓的 RLCD-style proper-scoring-rule reward、GRPO-style policy gradient、temperature calibration 和评测闭环,因此工程完整度明显高于很多只读取 logits 的 Jev-like 项目 https://t.co/QQR9wx2hOZ
3️⃣ Laya 【开源】
一个完全开源的、非自回归 System-One 决策模型家族,目前公开了三个 checkpoint:
英文 ModernBERT-large 421M
多语言 mmBERT-base 322M
面向 typed-decisions 的 421M 专用模型
权重、SDK、测试、benchmark、训练 notebook 都公开,Apache 2.0
作者提供的 fine-tuning notebook 包括数据构造、其所谓的 RLCD-style proper-scoring-rule reward、GRPO-style policy gradient、temperature calibration 和评测闭环,因此工程完整度明显高于很多只读取 logits 的 Jev-like 项目
https://t.co/QQR9wx2hOZ
来源:@ZHO_ZHO_ZHO · x.com