MODEL

Hy4 preview

腾讯混元团队发布的文本生成 MoE 模型。主干总参数770B、每个 token 激活49B，支持100万 token 上下文；权重已公开。

发布日期：

2026-08-28

参数量：

770B（主干）；另含10B MTP层

架构：

混合专家（MoE）；Gated DSA 注意力；78层主干

输入输出：

文本 → 文本

开放方式：

开源