据EDN电子技术设计报道，近日Arm、英特尔和NVIDIA携手发布了一份新的白皮书，描述了 8 位浮点规范和相应变体的概念，称为 FP8，具有变体 E5M2 和 E4M3，以提供可用于人工智能 (AI) 推理和训练的标准。期能通过8位元浮点运算的格式来改善运算性能，并将其作为AI通用的交换格式，提升深度学习训练推理速度；而该白皮书也已提交给电机电子工程师协会（Institute of Electrical and Electronics Engineers, IEEE）。
英伟达、ARM 和英特尔将目光投向 FP8“8 位浮点”，为他们未来的 AI 努力
从理论上讲，这三个科技巨头之间的这种新的跨行业规范将允许人工智能模型在硬件平台上工作和运行，将加速人工智能软件的开发。
人工智能创新在软件和硬件方面已经愈加重要，在过去几年中，对 AI 计算的要求也持续增加，在解决计算差距方面，降低深度学习中对数值精度的要求，从而提高内存和计算效率，是目前AI 领域研究的重点之一。
图片来源：“深度学习的 FP8 格式”，来自 NVIDIA、Arm 和英特尔。
英特尔打算在其涵盖处理器、显卡和众多 AI 加速器的路线图中支持 AI 格式的规范。该公司正在开发一种加速器，即 Habana Gaudi 深度学习加速器。降低精度方法的承诺允许在专注于提高计算效率的深度学习神经网络中挖掘固有的抗噪声特性。
图片来源：“深度学习的 FP8 格式”，来自 NVIDIA、Arm 和英特尔。
新的 FP8 规范将减少与当前 IEEE 754 浮点格式的偏差，在软件和硬件之间保持舒适的水平，利用当前的 AI 实现，加速采用并提高开发人员的生产力。
NVIDIA认为，拥有一种公用的交换格式，将能推动软件与硬件平台的互动，进而加快AI运算发展。也因此，NVIDIA、Intel和Arm携手合作，共同撰写FP8 Formats for Deep Learning白皮书，通过描述8位元浮点运算规格，提供一个共同的交换格式加速AI训练、推理。
NVIDIA进一步解释，FP8规范有两个变体，分别是E5M2和E4M3，可最大限度减少与现有的IEEE 754浮点格式的偏差，能为AI训练、推理发展带来更大的自由度，得以在硬件与软件间取得良好平衡，以改善开发者的生产效率。
根据实验结果，在广泛的训练架构中，像是Transformer，FP8训练的准确性都类似16位元结果，但却有更好的性能。譬如NVIDIA Hopper便利用新的FP8格式，在BERT高精度模型上实现了4.5倍的加速。
NVIDIA强调，与Intel、Arm合作撰写FP8 Formats for Deep Learning白皮书，是希望通过开放、免费授权的方式，提供一个通用、可维持准确性的交换格式，以加速AI发展，并让AI模型在所有硬件平台上都能有一致、高效的表现。
-
微信扫一扫
一键转发 -
最前沿的电子设计资讯
请关注“电子技术设计微信公众号”
- 用水泥和炭黑制造储能超级电容器 一项新的研究表明，人类最普遍的两种历史材料，水泥和炭黑（类似于非常细的木炭），可能会成为新型低成本储能系统的基础。该技术可以在可再生能源供应出现波动的情况下使能源网络保持稳定，从而促进太阳能、风能和潮汐能等可再生能源的使用。
- 一种用于电路板回收的新基材：遇水能溶 英国的Jiva Materials公司开发了一种新型的PCB基材Soluboard，这种基材是由天然纤维包裹在一种无卤的聚合物中制成的，与行业内经常使用的FR-4基材不同，这种材料只要在90摄氏度左右的热水中浸泡30分钟，就可以分层溶解···
- 美国公司声称发现室温超导材料，被授予了高于室温的第二 位于美国佛罗伦萨州的Taj Quantum的公司在社交媒体宣布，被授予了高于室温的第二类超导体专利。据称，这种独特的 II 型超导体（专利号：17249094）可在较宽的温度范围内工作，包括远高于室温的温度，从约 -100° F (-73° C) 到约 302° F (150° C) - 这是一种特性这在超导体世界中并不常见。
- 俄罗斯“贝加尔湖”基准测试对比英特尔和华为芯片，惨败 俄罗斯服务器处理器 Baikal-S 的开发人员将其性能与美国和中国的同类芯片进行了比较。涉及六个流行指标。
- 麻省理工发现新型量子磁铁释放电子潜力 研究人员发现了如何控制异常霍尔效应和贝里曲率来制造用于计算机、机器人和传感器的柔性量子磁体。
- 电池能用三十年？美国Ener Venue称推出革命性电池技术 三元锂离子电池的理论寿命约为800次循环，磷酸铁锂约为2000次，而钛酸锂据说可以达到1万次循环，也就是说常规普通人使用的锂离子电池每天完全充放电三次，最多也就能用上几年的时间。虽然相较于铅酸电池200-300次的循环寿命来说，这已经是很大幅度的提升了，但现在有一家公司宣称他们的电池可以充放电30000次，每天充放电三次，能用30年。
- 测试中比友商温度低14度，一加天工散热系统怎么做到的？ 7月27日，一加在2023年ChinaJoy上发布了全球首创的散热技术，即航天级三维立体散热系统“天工散热系统”，这是一加的又一次新的尝试，让我们一起来了解一下。
- 万物电气化：探索绿色未来之路 在本文中，我们将重点介绍美国年度脱碳展望(ADP)2022报告中的一些重要发现。本报告着眼于实现净零经济的各种情景。我们在本文中重点关注的方法称为“中心情景”，它遵循到2050年实现净零排放的时间表。
- 韩国造世界首个室温超导体，闹剧还是新的未来？ 7月22日，韩国的一个科研团队在预印本网站arXiv平台上上传了两篇论文，声称发现了世界上首个常压室温超导体，这种材料是一种改性铅磷灰石名为LK-99，超导临界温度在127摄氏度，即400K以上，而且在常压下就具备超导性。
- 下一个医疗前沿：网联可穿戴设备 医疗和消费级可穿戴设备将继续增强连接性和电池寿命，以实现对血压、体温和身体水分等多种生物标志物的实时和非侵入性监测。
- 瑞能半导体全球首座模块工厂在上海湾区高新区正式投入 瑞能微恩半导体暨瑞能金山模块厂开业典礼在上海湾区高新区隆重举行，标志着瑞能全球首座模块工厂正式投入运营，将主要生产应用于消费、通讯、新能源以及汽车相关的各类型功率模块产品，串联客户和生态圈，积极推动行业高质量发展。
- TI无线MCU创新方案，助力用户加速拥抱物联网 7月21日，由AspenCore主办的“2023全球MCU生态发展大会”在深圳罗湖君悦酒店隆重举行，特邀请到MCU领域的领军企业之一德州仪器(TI)参加了“无线MCU分论坛”，论坛上，TI无线产品工程师魏天华分享了主题为“创新型无线解决方案，助力不断发展的互联世界”的演讲，为现场观众带来了TI最新的无线MCU系列，以及对于这一市场的深刻思考。
- 激发未来小小女工程师对STEM课程的兴趣，对工程界至关重要 泰克科技组合软件总经理Rick Khulman: “激发孩子们——尤其是女孩们对STEM的兴趣，对我本人乃至广大工程界
- 数据闭环——自动驾驶下半场的“入场券” 自动驾驶战争的上半场拼的是硬件和算法，下半场拼的则是数据和将数据点石成金的能力，即数据闭环能力。
- Nothing Ear（2）真无线降噪耳机拆解 在2023年3月，Nothing正式发布了全新迭代产品——Nothing Ear（2）真无线降噪耳机，在外观方面延续了家族式的透明元
- 小米Sound Move智能音箱拆解 Xiaomi Sound Move搭载4单元，采用双对称立体声学结构设计，通过高解析力双扬声器和双被动辐射器，经由小米声学金
- 射频传输线基础 今天大家一起学习一下射频传输线基础这篇讲义
- 奔驰半年成绩单：让赚钱变得更优雅！ 2023年上半年，梅赛德斯-奔驰集团呈现出强劲的财务表现和业务增长。本文详述各方面的具体表现。
- 自动驾驶对动力系统的影响 7月13日，由中国汽车工程学会、青岛市工业和信息化局主办，中汽翰思管理咨询公司协办的第十五届汽车动力系统技
- 红配绿，黑与白？什么样的配色才能俘获审稿人的芳心？ 好的科研绘图配色令人印象深刻，也能更准确地传递数据信息，今天小编就带大家看一下怎样去选择最适合自己数据，能
- AP AUTOSAR设计思想及原理 本文给大家分享一下在 AP AUTOSAR 里面我们怎么样去做一个设计，整个 AP 的设计思想及原理。
- 多合一电驱动系统设计和挑战 7月13日，由中国汽车工程学会等主办的第十五届汽车动力系统技术年会（TMC2023）在青岛举行。会上许多公司展示了引
- 电动化降价，智能化收费：未来汽车的双重变革 从2023年开始，价格战的阴影一直笼罩在汽车行业上面，“卷”是进行时，但是怎么”卷”出来是所有人考虑的问题。
- 宝华韦健TWS耳机PI7 S2评测 全新一代 Pi7 S2 的体验如何？耳机在保持上代经典「英伦风」的同时，又能带来哪些新体验呢？下面，就让我爱音频网带
- 瑞萨电子MCU和MPU产品线将支持Microsoft Visual Studio Code 客户现可以在VS Code中设计和调试瑞萨嵌入式处理器的软件，与瑞萨自有e2 Studio IDE相辅相成
- 逐点半导体IRX游戏体验品牌正式上线 从移动视觉处理方案到特定游戏调优，推动手游体验迈向新的征程
- 大联大世平集团推出基于onsemi产品的电动汽车（EV）充电桩方案 大联大控股宣布，其旗下世平推出基于安森美（onsemi）NTBG022N120M3S和NCD57084产品的电动汽车（EV）充电桩方案。
- 意法半导体发布创新红外传感器，提升楼宇自动化的人员存在和移动检 带有微加工热敏晶体管的高集成度、超低功耗传感器可取代传统的被动红外探测器
- 比科奇介绍其打造更加智能移动通信基础设施新愿景 比科奇在MWC上海世界移动通信大会期间介绍了其在引入人工智能（AI）等技术打造更加智能的移动通信基础设施方向
- WiSA E开发套件开始向全球发货，旨在统一非Sonos音频市场 面向中国、韩国、日本和美国的各大品牌发货
- 安森美和麦格纳签署战略合作协议，投资碳化硅生产以满足日益增长的 麦格纳将在其主驱逆变器方案中集成安森美的EliteSiC以增加电动汽车的续航里程和能效
- 小尺寸大功率Harwin连接器子系列可从360° EMC后壳中受益 Harwin公司宣布其Kona大功率连接器子系列现已推出带后壳的产品。
- Arm 扩大开源合作伙伴关系，加强投入开放协作 Arm 和我们的生态系统的关键信念之一是与开源社区合作，共创一个高度发达的 Arm 架构，使软件的落地更加稳定，从
- WiSA推出两款功能强大的新工具，用于实现、管理和测试WiSA技术支持 新工具可为客户提供全面支持，助其开发和制造采用WiSA E和WiSA DS设计、用于多声道音频的产品
- 艾迈斯欧司朗推出智能多像素EVIYOS 2.0 LED，适用于高精度自适应 EVIYOS 2.0具备高分辨率、完全防眩智能远光功能，在远光模式下自动降低眩光；EVIYOS 2.0将图像和安全警示投射
- 全新Arm IP Explorer平台助力SoC架构师与设计厂商加速IP选择 Arm推出全新Arm IP Explorer平台
