广告

Meta自研芯片成了?7nm工艺、32位RISC-V CPU

2022-05-06 15:55:53 阅读:
根据 The Information的一份报告,Meta 计划在 2024 年之前发布四款新的 VR 头显,同时,Meta也在积极研发专门用于AI处理的定制加速器芯片,近日外媒报道了该芯片的相关性能。

根据 The Information的一份报告,Meta 计划在 2024 年之前发布四款新的 VR 头显,据称这是其 AR 设备的补充。bIIednc

Meta 的四款新耳机中的第一款将是 Project Cambria,该报告称预计将于今年 9 月推出。bIIednc

据报道,Cambria 的后续行动已经在进行中。代号为 Funston,预计在 2024 年推出。bIIednc

至于其他两款耳机,它们是 Meta 更实惠的 Quest 2 耳机的下一代迭代,据报道代号为 Stinson 和 Cardiff,预计分别在 2023 年和 2024 年发布。bIIednc

但是,Cambria 以外的头显将成为目标的哪些功能仍然有些不清楚。对于围绕计算架构中的一些根本变化构建的头显来说,Meta 认为将 XR 设备或它一直在研究的全息折叠光学器件提升到一个新的水平所必需的还为时过早,尽管可能变焦技术 Meta 已经研究了多年几乎准备好迎接黄金时段了。bIIednc

值得注意的是,Meta未来的VR 头显或将搭载其自研的用于AI处理的定制加速器芯片。bIIednc

据外媒ROAD TOVR报道称,Meta Reality Labs的研究人员已经制造了一款VR头戴设备原型机,该原型机可以支持Codec Avatars项目的渲染,并且搭载了专门用于AI处理的定制加速器芯片。bIIednc

Meta更名前就致力于Codec Avatars项目

早在Facebook更名为Meta前,该公司就一直致力于Codec Avatars项目,该项目旨在使VR实现“如照片般逼真”的虚拟化身。这一系统结合AI处理和设备上的眼动追踪、嘴巴追踪等传感器,将使用者的脸以最接近真实的方式投射进虚拟世界。bIIednc

该公司的Codec Avatars研究的早期版本得到了NVIDIA Titan X GPU强大算力的支持。但在Meta最新的Quest 2一体机等设备上,并不能完全发挥其功能。bIIednc

据称该公司已着手研究如何在低功耗独立耳机上实现 Codec Avatars,上个月发表在IEEE CICC会议上的一篇论文中,Meta透露它正在设计一个采用7nm工艺的定制芯片用于作为Codec Avatars的加速器。bIIednc

集成32 位 RISC-V CPU的定制芯片

据悉,该芯片的占位面积仅为 1.6mm²,该小组在芯片设计过程中,设计人员考虑了生成Codec Avatars 模型所需要的数据。bIIednc

bIIednc

“测试芯片采用7nm制程,具有神经网络加速器,由1024乘法累加阵列、2MB片上SRAM和32位RISC-V CPU组成。”研究人员说。bIIednc

反过来,他们还重建了 Codec Avatars AI 模型的一部分,以配合芯片的特定架构。bIIednc

“我们通过重新构建基于卷积神经网络的眼睛注视模型并针对硬件进行定制,使得模型更加适合芯片。这降低了片外内存访问的能耗和延迟。” Reality Labs研究人员写道。“通过在电路级有效地加速卷积运算,所展示的原型芯片实现了每秒 30 帧的性能,并且功耗低且外形小巧。”bIIednc

bIIednc

通过加速 Codec Avatars 工作负载的密集部分,该芯片不仅加快了进程,而且还降低了功率及发热。由于芯片的定制设计,它能够比通用 CPU 更有效地做到这一点,然后为 Codec Avatars 的眼动追踪组件的重新架构软件设计提供信息。bIIednc

虽然定制芯片处理部分 Codec Avatars 编码过程,但 XR2 管理解码过程并渲染化身的实际视觉效果。bIIednc

bIIednc

得益于专用芯片的加速,Meta的Codec Avatars或许可以在一体机上运行。但目前我们不知道虚拟化身的视觉渲染效果如何。在非一体机上运行时,该模型将用户建模扫描的非常详细,这可能过于复杂,不能在Quest2等一体机上得到完整的呈现。目前还不知道Codec Avatars强大的“逼真”画面在这客观条件的限制下最终呈现的效果会如何。bIIednc

我们可以想象,一系列XR特定的功能都可以通过这种专门设计的加速芯片来实现。比如在XR世界中实现空间音频是XR玩家们愿意看到的,这可以增加沉浸感。但逼真的声音模拟在实际使用中不仅会增加成本,并且也会影响续航。bIIednc

另外,位置跟踪和手势跟踪也是XR体验的关键部分,在这些地方将硬件和算法结合起来进行设计可以使XR设备在速度和功率方面取得巨大的提升。bIIednc

参考链接:Prototype Meta Headset Includes Custom Silicon for Photorealistic Avatars on StandalonebIIednc

Demi Xia编译bIIednc

责编:Demi
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 深圳允许完全自动驾驶车辆上路,主驾无需坐人 据EDN电子技术设计引援央视财经报道,从8月1日开始,《深圳经济特区智能网联汽车管理条例》正式实施,智能网联汽车列入国家汽车产品目录或者深圳市智能网联汽车产品目录,这也让深圳成为了国内首个允许L3级别自动驾驶车辆合法上路的城市。
  • 理想ONE高速起火烧成光架,其1.2T三缸增程器曾被指隐藏 近期,网络平台上发布了一段理想ONE在行驶过程中,车辆出现起火的视频内容。现场拍摄的灭火后图片显示,该轿车过火后仅剩骨架,车辆前部增程器位置受损严重,车辆尾门已经在过火后从车身主体脱落。此前,曾有国内汽车媒体对一台行驶了10万公里的理想ONE的东安1.2T三缸增程发动机进行拆解,被指隐藏暗病。
  • 上海微系统所使用石墨烯纳米带研制出世界上最小尺寸的 非易失性相变随机存取存储器(PCRAM)被认为是大数据时代新兴海量存储的有希望的候选者之一。然而,相对较高的编程能量阻碍了 PCRAM 中功耗的进一步降低。利用石墨烯的窄边接触可以有效降低每个电池中相变材料的活性体积,从而实现低功耗运行。
  • 可解决工业自动化和IIoT挑战的MCU 工业自动化和工业物联网(IIoT)设计人员的性能要求不断变化。就MCU而言,他们希望获得更快的处理速度、更多的内存、更好的连接性和更多的安全功能。
  • 我国建成开通5G基站数达185.4万个 工信部近日透露,截至2022年6月底,中国5G基站数达到185.4万个,其中二季度新增基站近30万个,已建成全球规模最大、技术领先的网络基础设施,实现“县县通5G、村村通宽带”。。
  • 第三代半导体——碳化硅材料之制程与分析 SiC功率电子是加速电动车时代到来的主要动能。以SiC MOSFET取代目前的Si IGBT,不仅能使电力移转时的能源损耗降低80%以上,同时也可让芯片模块尺寸微缩至原本的1/10,达到延长电动车续航里程及缩短充电时间的功效。
  • 开源软件真的可靠吗? 乍看之下,采用开源软件似乎是个不错的办法,但归根究底,开源软件有几个特性可能会使其变得“邪恶”...
  • GaN是否可靠? GaN产业已经建立一套方法来保证GaN产品的可靠性,因此问题并不在于“GaN是否可靠?”,而是“如何验证GaN的可靠性?”
  • MIT研究人员发现了一种性能比硅更好的半导体材料 硅是地球上最丰富的元素之一,其纯净形式已成为许多现代技术的基础,从太阳能电池到计算机芯片,但硅作为半导体的特性远非理想。现在,来自 MIT、休斯顿大学和其他机构的一组研究人员发现了一种称为立方砷化硼的材料,这种材料可以克服硅的上述两个限制。其为电子和电洞提供了高迁移率,并具有优良的热导率。研究人员表示,这是迄今为止发现最好的半导体材料,在将来也可能说是最好的材料。
  • 增强型GaN HEMT的漏极电流特性 增强型GaN基高电子迁移率晶体管(HEMT)已经采用两种不同的结构开发出来。这两种增强型结构是金属-绝缘层-半导体(MIS)结构和栅极注入晶体管(GIT)结构。MIS结构具有受电压驱动的小栅极漏电流,而GIT则具有脊形结构和高阈值电压。两者也都有一些缺点。MIS对栅极干扰的可靠性较低,阈值电压较低,而GIT的栅极开关速度较慢,栅极漏电流较大。
  • 美国国土安全部(DHS)被曝大量购买和使用手机定位数据 据EDN电子技术设计了解,美国公民自由联盟18日发表最新文件,称美国国土安全部(DHS)使用移动定位数据来追踪人们的行动,据悉美国公民自由联盟发表的记录多达数千页,其规模远远超过之前的认知。
  • 带电路板、可玩AR、嵌金刚石,这些录取通知书科技感十足 伴随着高考大考的落幕,各大高校目前纷纷寄出独具特色的录取通知书,不仅有颜值高,创意新颖的竹子卷轴、锦凤递书,还科技感满满的“电路板”录取通知书、摩斯密码......寄托着对于即将踏进大学校园的学子们的深深祝福和期许。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了