Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍

阅读量:197
2024-04-11

Meta Platforms 当地时间 10 日发布了其训练与推理加速器项目(MTIA)的最新版本,MTIA 是 Meta 专门为 AI 工作负载设计的定制芯片系列。

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍 (https://www.qianyan.tech/) IC硬件 第1张

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍 (https://www.qianyan.tech/) IC硬件 第2张

据介绍,此次发布的新一代 MTIA 与第一代 MTIA 相比,显著改进了性能,并有助于强化内容排名和推荐广告模型。其架构从根本上侧重于提供计算、内存带宽和内存容量的适当平衡。

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍 (https://www.qianyan.tech/) IC硬件 第3张

该芯片还可帮助提高训练效率,使推理(即实际推理任务)变得更容易。Meta 在其官方博客文章中表示,“实现我们对定制芯片的雄心壮志,意味着我们不仅要投资于计算芯片,还要投资于内存带宽、网络和容量以及其他下一代硬件系统。”

目前,MTIA 主要训练排名和推荐算法,但 Meta 表示,其目标是最终扩展芯片功能,开始训练生成式人工智能,如其 Llama 语言模型

此次发布的新一代 MTIA 芯片据悉将“从根本上”侧重于提供计算、内存带宽和内存容量之间的适当平衡。该芯片拥有 256MB 的片上内存和 1.35GHz 的主频,采用台积电 5nm 工艺制造,相较于第一代产品的 128MB 和 800MHz 实现了显著提升。

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍 (https://www.qianyan.tech/) IC硬件 第4张

Meta 公司的早期测试结果显示,在该公司评估的四种型号中,新芯片的性能达到第一代的三倍。IT之家附该芯片详细参数与前代产品的对比如下图:

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍 (https://www.qianyan.tech/) IC硬件 第5张

当前该芯片已在数据中心部署,并为 AI 应用提供服务。

THE END

发表回复

相关推荐