导语：Meta为XR设计芯片，为传神“元宇宙”体验专门优化。

据外媒ROAD TOVR动静，Meta Reality Labs的研究职员已经经制造了一款VR头戴装备原型机，该原型机可以撑持Codec Avatars项目的衬着，而且搭载了专门用在AI处置惩罚的定制加快器芯片。

早于Facebook改名为Meta前，该公司就一直致力在Codec Avatars项目，该项目旨于使VR实现“如照片般传神”的虚拟化身。这一体系联合AI处置惩罚及装备上的眼动追踪、嘴巴追踪等传感器，将利用者的脸以最靠近真正的方式投射进虚拟世界。

Codec Avatars研究的初期版本获得了NVIDIA Titan X GPU强盛算力的撑持。但于Meta最新的Quest 2一体机等装备上，其实不能彻底阐扬其功效。

也正是以，Meta正于着手研究怎样于低功率一体机上实现Codec Avatars项目的功效。

上个月发表于IEEE CICC集会上的一篇论文中，Meta吐露它正于设计一个采用7nm工艺的定制芯片用在作为Codec Avatars的加快器。

现实上，Meta的造芯规划早于2018年就已经经最先。2018年4月，Facebook将Shahriar Rabii招入麾下担当副总裁兼芯片卖力人，Rabii此前任职在Google，并介入了Pixel手机Visual Core等芯片开发。

研究职员称，该芯片从论文走向实际，还有有相称长的一段路要走。

于芯片设计历程中，设计职员思量了天生Codec Avatars 模子所需要的数据。

“测试芯片采用7nm制程，具备神经收集加快器，由1024乘法累加阵列、2MB片上SRAM及32位RISC-V CPU构成。”研究职员说。

另外一方面，为了共同该芯片的特定架构，设计职员还有重构了Codec Avatars AI模子的一部门。

“咱们经由过程从头构建基在卷积神经收集的眼睛凝视模子并针对于硬件举行定制，使患上模子越发合适芯片。这降低了片外内存拜候的能耗及延迟。” Reality Labs研究职员写道。

加快芯片经由过程加快Codec Avatars事情负载较重的部门，不仅加速了模子的运行速率，并且还有降低了功率及发烧。因为芯片的定制上风，于功率及体积节制上该定制芯片较通用CPU更有上风。

据研究职员说，该芯片已经经可以或许实此刻每一秒30帧的环境下运行Codec Avatars模子。而且同时做到功耗低及形状小巧。

患上益在专用芯片的加快，Meta的Codec Avatars也许可以于一体机上运行。但今朝咱们不知道虚拟化身的视觉衬着效果怎样。于非一体机上运行时，该模子将用户建模扫描的很是具体，这可能过在繁杂，不克不及于Quest2等一体机上获得完备的出现。今朝还有不知道Codec Avatars强盛的“传神”画面于这客不雅前提的限定下终极出现的效果会怎样。

咱们可以想象，一系列XR特定的功效均可以经由过程这类专门设计的加快芯片来实现。好比于XR世界中实现空间音频是XR玩家们愿意看到的，这可以增长沉浸感。但传神的声音模仿于现实利用中不仅会增长成本，而且也会影响续航。

别的，位置跟踪及手势跟踪也是XR体验的要害部门，于这些处所将硬件及算法联合起来举行设计可使XR装备于速率及功率方面取患上巨年夜的晋升。雷峰网(公家号：雷峰网)

雷峰网版权文章，未经授权禁止转载。详情见转载须知。