MODEL

DBRX

Databricks 开源的 1320 亿参数 MoE 模型，提升了当时的开源基准记录。 参数规模：132B (MoE)；开放方式：开源；主要架构：混合专家 Transformer（MoE）。

发布日期：

2024-03-27

参数量：

132B (MoE)

架构：

混合专家 Transformer（MoE）

模态：

文本

开放方式：

开源