.hd-box .hd-fr

Meta 发布新一代 AI 训练与推理芯片,性能为初代芯片三倍

2024-04-10 23:30IT之家(清源)7评

IT之家 4 月 10 日消息,Meta Platforms 当地时间 10 日发布了其训练与推理加速器项目(MTIA)的最新版本,MTIA 是 Meta 专门为 AI 工作负载设计的定制芯片系列。

据介绍,此次发布的新一代 MTIA 与第一代 MTIA 相比,显著改进了性能,并有助于强化内容排名和推荐广告模型。其架构从根本上侧重于提供计算、内存带宽和内存容量的适当平衡。

该芯片还可帮助提高训练效率,使推理(即实际推理任务)变得更容易。Meta 在其官方博客文章中表示,“实现我们对定制芯片的雄心壮志,意味着我们不仅要投资于计算芯片,还要投资于内存带宽、网络和容量以及其他下一代硬件系统。”

目前,MTIA 主要训练排名和推荐算法,但 Meta 表示,其目标是最终扩展芯片功能,开始训练生成式人工智能,如其 Llama 语言模型

此次发布的新一代 MTIA 芯片据悉将“从根本上”侧重于提供计算、内存带宽和内存容量之间的适当平衡。该芯片拥有 256MB 的片上内存和 1.35GHz 的主频,采用台积电 5nm 工艺制造,相较于第一代产品的 128MB 和 800MHz 实现了显著提升。

Meta 公司的早期测试结果显示,在该公司评估的四种型号中,新芯片的性能达到第一代的三倍。IT之家附该芯片详细参数与前代产品的对比如下图:

当前该芯片已在数据中心部署,并为 AI 应用提供服务。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

下载IT之家APP,分享赚金币换豪礼
相关文章
大家都在买广告
热门评论
查看更多评论