研究发布
DeepMind 公布视觉语言模型 Flamingo
DeepMind 公布 800 亿参数视觉语言模型 Flamingo,可通过少量示例处理图像、视频和文本任务。
ORGANIZATION
Google DeepMind 是位于美国的人工智能研发机构。本页只收录能够关联到该机构一手发布记录的模型事件。
按时间倒序整理已验证的发布与公司动态。
研究发布
DeepMind 公布 800 亿参数视觉语言模型 Flamingo,可通过少量示例处理图像、视频和文本任务。
模型发布
Google 公布由 Pathways 训练的 540B 参数稠密语言模型;首发为研究披露,并未开放权重或通用 API。
模型发布
研究发布
DeepMind 公布代码生成系统 AlphaCode,其 Codeforces 表现达到约参赛者中位水平。
论文发布
研究发布
DeepMind 公布 2800 亿参数语言模型 Gopher 及其能力、局限和风险研究,但未开放模型权重或公共调用入口。
模型发布
论文发表
Switch Transformer 把每个 token 路由到单个专家,在保持稀疏计算的同时把总参数规模扩展到约 1.6T。
模型发布
Google 研究者提出 GShard 自动分片机制,并用它在 2,048 个 TPU v3 上训练超过 600B 参数的多语翻译 MoE。
研究发布
Google Research 公布 26 亿参数开放域对话模型 Meena,但未开放外部演示或模型权重。
论文发表
开源发布
Google Brain 与卡内基梅隆大学研究者提出 XLNet,并同步开放 XLNet-Large 检查点和 TensorFlow 代码。
论文发表
论文发表