又一大厂发力RISC-V,Meta第一代自研AI加速器MTIA

不久之前,meta公开了他们在自研芯片上的进展,包括其第一代ai加速器mtia,以及用于视频转码的msvp。作为有些“下坡路”倾向的互联网大厂,meta依然选择自研硬件和芯片,可见meta对ai的重视。
自研ai加速器mtia
meta过去的服务器架构主要依靠cpu来运行ai负载,但随着ai模型对算力和内存的要求不断提高,致使其不得不开始转向特化的方案,比如gpu和nnpi之类的其他硬件加速器。可由于高性能gpu的成本持续走高,meta很快就转向了自研asic方案。
其实早在2020年,他们就设计了第一代的mtia asic,不过当时仅仅只是用于mtia的部分内部工作负载,主要是为pytorch和meta的推荐模型联合设计出来的,用于推理加速。第一代mtia基于台积电7nm工艺打造,性能达到了102.4tops@int8和51.2 tflops@fp16,功耗仅有25w。
mtia v1裸片 / meta
单个mtia加速器集成了64个处理单元(pe),最高128gb的片外lpddr5内存和128mb的片上sram。值得一提的是,每个处理单元都由两个risc-v处理器核心构成,其中一个还配备了向量扩展。
从meta公布的v1版系统设计上可以看出,mtia加速器装在了一个小型的双m.2主板上,方便设计者轻松地集成在服务器中,通过pcie 4.0 x8接口与主cpu相连,板卡功耗仅有35w。
当然了,作为ocp的创始者,meta也在服务器的设计上采用了ocp的yosemite v3规范,每个服务器包含12个加速器,并使用pcie switch相连,根据meta的说法,加速器的数目和服务器的配置参数是为了优化目前及未来的负载而精心选择的。
自研视频转码芯片msvp
值得注意的是,mtia v1还只是他们在2020年开发的第一代ai加速器,meta的目标是设计一系列推荐用mtia asic。不过,mtia v1在自研程度上或许没有我们想象得那么深入,比如其risc-v核心很可能是来自第三方ip厂商的。
而与mtia一并公开的msvp,却是meta首个真正意义上的内部自研asic方案,专为解决meta的视频点播和直播负载而设计,甚至考虑到了其ar/vr业务。meta认为,这类转码芯片的存在,会为meta未来在元宇宙上布局的生成式ai短视频,提供更多支持。
msvp / meta
据meta强调,facebook网站上的视频流量每天就有40亿播放量,所以提升压缩效率,提供更高的稳定性、可靠性以及近乎无限的扩展性,就成了他们对自研视频转码芯片的要求。从msvp的设计架构上来看,除了多处理器的cpu子系统外,芯片大部分由转码核心构成。
在解码性能上,msvp支持主流的h.264、hevc、vp9和av1编码,最大支持10bit色深和yuv420色度采样。而在编码性能上,msvp仅支持h.264和vp9编码,最大支持8bit色深。
meta给出的数据中,每个msvp可以在最高图像质量输出时实现4k 15fps的峰值转码速度,在标准图像质量下实现4k 60fps的转码速度,且单个pice模块的功耗只有10w左右。由于采用了硬件转码加速,msvp是ibx264软件编码速度的9倍,是libvpx软件编码速度的50倍。
写在最后
meta最重要的一大营收来源就是广告业务,所以相对其他互联网公司,他们会将深度学习推荐模型(dlrm)放在第一位。随着模型大小和复杂程度不断增加,如何跟上这股趋势同时保证roi,就成了他们的主要问题。mtia代表了他们在自研ai基础设施上走出的重要一步。至于msvp,则代表了meta想要进一步发展短视频、ar/vr内容的同时,减少网络带宽提高传播力度的解决方案。未来meta要想逆流而上,这些自研芯片无疑会提供不小的助力。

压力传感器怎么控制变频器
PLC故障查找方法流程图及其处理对策
东芝全球首发64层3D TLC闪存SSD:容量轻松达到30TB
海思PLC-IOT电力载波模组MN-L80A
电池修复——电动车电瓶日常维护(普通人可掌握)
又一大厂发力RISC-V,Meta第一代自研AI加速器MTIA
Facebook离职潮 Oculus创始人离职原因或在扎克伯格
老款特斯拉Model S/X频繁出现闪存超负荷擦写
Docker容器和Kubernetes退出码中文指南
迷你键盘制作图解
高增益50W GaN HEMT功率放大器
智能化光学薄膜在线瑕疵检测系统的原理及功能
车企为何选择Android Automotive OS?
荧光定量pcr分析仪相关注意事项及介绍
智能网络和IPU在提升数据中心的性能时还能降低功耗
可折叠屏手机的市场正在不断扩大 预计今年出货量可达到550万部
AMD Ryzen 5000H/5000U爆料参数汇总
小米MIX2、小米Note3同天发布?尴尬的小米Note3,靠双曲面屏立足?
华尔街交易员被人工智能取代
中兴完成SPN转发面互通第一阶段测试,为SPN设备组网提供更多选择