首页 -> 登录 -> 注册 -> 回复主题 -> 发表主题
光行天下 -> 光电资讯及信息发布 -> IBM开发新的光学技术实现光速AI训练 [点此返回论坛查看本帖完整版本] [打印本页]

cyqdesign 2024-12-11 12:29

IBM开发新的光学技术实现光速AI训练

IBM 开发了一种新的光学技术,可以以光速训练 AI 模型,同时节省大量能源。该公司表示,通过将其突破性技术应用于数据中心,训练 AI 模型时节省的能源相当于 5000 个美国家庭的年度能源使用量。 #h5Hi9LKf  
该公司解释说,虽然数据中心通过光纤电缆与外界相连,但在内部,他们仍在使用铜线。这些电线连接 GPU 加速器,这些加速器在等待来自其他设备的数据时会花费大量时间处于空闲状态,同时消耗能源并推高成本。 BZ'y}Zu*  

[attachment=131041]
Y GcY2p<  
IBM 高级副总裁兼研究总监 Dario Gil 在评论这一发展时表示:“由于生成 AI 需要更多的能源和处理能力,数据中心必须不断发展——而同封装光学器件可以使这些数据中心面向未来。有了这一突破,未来的芯片将像光纤电缆将数据传入和传出数据中心一样进行通信,开启一个更快、更可持续的通信新时代,可以处理未来的 AI 工作负载。” P[J qJi/H  
IBM 在一份技术论文中概述了其新的共封装光学器件 (CPO) 原型。通过显著增加数据中心的带宽,可以最大限度地减少 GPU 停机时间,从而加速 AI 处理。 :67d>wb  
IBM 解释说,大型语言模型 (LLM) 的训练时间可以从三个月缩短到三周。同时,提高能源效率将减少能源使用量并降低与训练 LLM 相关的成本。

ka2012 2024-12-11 12:52
人工智能影响了很多行业。
查看本帖完整版本: [-- IBM开发新的光学技术实现光速AI训练 --] [-- top --]

Copyright © 2005-2024 光行天下 蜀ICP备06003254号-1 网站统计