跳到正文
LMSYS Blog· SGLang & Miles Team·· 1 天前AI 评分49

SGLang 与 Miles 在 NVIDIA Vera Rubin 上的推理与 RL 训练实践

SGLang and Miles on NVIDIA Vera Rubin

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

LMSYS 团队在 NVIDIA Vera Rubin 节点(8 GPU)上跑通 SGLang 推理与 Miles RL 训练,并针对 Kimi K3 NVFP4 优化 attention、MoE 通信与 KDA kernel。

来源:LMSYS Blog · lmsys.org