IBM开发新的光学技术实现光速AI训练

发布:cyqdesign 2024-12-11 12:29 阅读:51

IBM 开发了一种新的光学技术,可以以光速训练 AI 模型,同时节省大量能源。该公司表示,通过将其突破性技术应用于数据中心,训练 AI 模型时节省的能源相当于 5000 个美国家庭的年度能源使用量。

该公司解释说,虽然数据中心通过光纤电缆与外界相连,但在内部,他们仍在使用铜线。这些电线连接 GPU 加速器,这些加速器在等待来自其他设备的数据时会花费大量时间处于空闲状态,同时消耗能源并推高成本。

IBM 高级副总裁兼研究总监 Dario Gil 在评论这一发展时表示:“由于生成 AI 需要更多的能源和处理能力,数据中心必须不断发展——而同封装光学器件可以使这些数据中心面向未来。有了这一突破,未来的芯片将像光纤电缆将数据传入和传出数据中心一样进行通信,开启一个更快、更可持续的通信新时代,可以处理未来的 AI 工作负载。”

IBM 在一份技术论文中概述了其新的共封装光学器件 (CPO) 原型。通过显著增加数据中心的带宽,可以最大限度地减少 GPU 停机时间,从而加速 AI 处理。

IBM 解释说,大型语言模型 (LLM) 的训练时间可以从三个月缩短到三周。同时,提高能源效率将减少能源使用量并降低与训练 LLM 相关的成本。

分享到:

最新评论

ka2012 2024-12-11 12:52
人工智能影响了很多行业。
我要发表 我要评论
限 50000 字节
关于我们
网站介绍
免责声明
加入我们
赞助我们
服务项目
稿件投递
广告投放
人才招聘
团购天下
帮助中心
新手入门
发帖回帖
充值VIP
其它功能
站内工具
清除Cookies
无图版
手机浏览
网站统计
交流方式
联系邮箱:商务合作 站务处理
微信公众号:opticsky 微信号:cyqdesign
新浪微博:光行天下OPTICSKY
QQ号:9652202
主办方:成都光行天下科技有限公司
Copyright © 2005-2024 光行天下 蜀ICP备06003254号-1