跳到正文
热点事件持续更新

Qwen4-27B架构细节经GitHub PR泄露

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

2026年10月26日,AI前线报道称,一份已合并的Intel GPU推理内核PR(编号#22)标题中出现了尚未发布的Qwen4-27B,llama.cpp社区据此还原其架构。报道称,该模型延续Qwen3.8-27B的Dense稠密架构,隐藏层维度为5120,并新增四路Hyper-Connections、Sigmoid输出门控和QSA稀疏注意力。目前信息仅来自该PR标题及社区据此作出的还原,尚无官方发布或确认。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. AI前线 · 微信公众号
    Qwen4-27B 架构线索现身 GitHub:27B 延续 Dense 路线并引入四路残差与稀疏注意力

    一份已合并的 Intel GPU 推理内核 PR(编号 #22)标题中出现了未发布的 Qwen4-27B,llama.cpp 社区据此还原其架构:延续 Qwen3.8-27B 的 Dense 稠密架构,隐藏层维度 5120,新增四路 Hyper-Connections、Sigmoid 输出门控和 QSA 稀疏注意力。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。