0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

IBM 发布光学技术关键突破,生成式AI迎来"光速时代"

全球TMT 来源:全球TMT 作者:全球TMT 2024-12-12 15:53 次阅读

新的光电共封装技术或取代数据中心中的电互连装置,大幅提高AI 和其他计算应用的速度与能效

北京2024年12月12日/美通社/ -- 近日,IBM(纽约证券交易所代码:IBM)发布了其在光学技术方面的突破性研究成果,有望显著提高数据中心训练和运行生成式 AI 模型的效率。IBM研究人员开发的新一代光电共封装(co-packaged optics,CPO) 工艺,通过光学技术实现数据中心内部的光速连接,为现有的短距离光缆提供了有力补充。通过设计和组装首个宣布成功的聚合物光波导 (PWG),IBM 研究人员展示了光电共封装技术将如何重新定义计算行业在芯片、威廉希尔官方网站 板和服务器之间的高带宽数据传输。


IBM optics module

今天,光纤技术已经被广泛用于远距离的高速数据传输,实现了"以光代电"来管理全球几乎所有的商业和通信传输。虽然数据中心的外部通信网络已经采用光纤,但其内部的机架仍然主要使用铜质电线进行通信。通过电线连接的 GPU 加速器可能有一半以上的时间处于闲置状态,在大型分布式训练过程中需要等待来自其他设备的数据,导致高昂的成本和能源浪费。

IBM 研究人员发现了一种将光学的速度和容量引入数据中心的新方法。在其最新发表的一篇论文中,IBM 展示了其全球首发、可实现高速光学连接的光电共封装原型。这项技术可大幅提高数据中心的通信带宽,最大限度地减少 GPU 停机时间,同时大幅加快 AI 工作速度。该创新将实现以下新突破:

降低规模化应用生成式AI 的成本:与中距电气互连装置相比,能耗降低 5 倍以上,[1]同时将数据中心互连电缆的长度从 1 米延长至数百米。

提高AI 模型训练速度:与传统的电线相比,使用光电共封装技术训练大型语言模型的速度快近五倍,从而将标准大语言模型的训练时间从三个月缩短到三周;用于更大的模型和更多的 GPU,性能将获得更大提升。[2]

大幅提高数据中心能效:在最新光电共封装技术的加持下,每训练一个 AI 模型所节省的电量,相当于 5000 个美国家庭的年耗电量总和。[3]

IBM 高级副总裁、IBM研究院院长Dario Gil表示:"生成式AI需要越来越多的能源和处理能力,数据中心必须随之升级换代,而光电共封装技术可以帮助数据中心从容面向未来。随着光电共封装技术取得突破,光纤电缆将大幅提升数据中心的数据传输效率,芯片之间的通信、AI工作负载的处理也会更高效,我们将进入一个更高速、更可持续的新通信时代。"

比现有芯片间通信带宽快 80 倍
得益于近年芯片技术的进步,芯片上可以容纳更多、更密集的晶体管;比如,IBM 的 2 纳米芯片技术可在单一芯片上植入 500 多亿个晶体管。光电共封装技术旨在扩大加速器之间的互连密度,帮助芯片制造商在电子模组上添加连接芯片的光通路,从而超越现有电子通路的限制。IBM 的论文所述的新型高带宽密度光学结构和其他创新成果,比如,通过每个光通道传输多个波长,有望将芯片间的通信带宽提高至电线连接的80 倍。

与目前最先进的光电共封装技术相比,IBM 的创新成果可以使芯片制造商在硅光子芯片边缘增加六倍数量的光纤,即所谓的"鬓发密度 (beachfront density)"。每根光纤的宽度约为头发丝的三倍,长度从几厘米到几百米不等,可传输每秒万亿比特级别的数据。IBM 团队采用标准封装工艺,在 50 微米间距的光通道上封装高密度的聚合物光波导 (PWG),并与硅光子波导绝热耦合

论文还指出,上述光电共封装模块采用50微米间距的聚合物光波导,首次通过了制造所需的所有压力测试。这些模组需要经受高湿度环境、-40°C 至 125°C 的温度以及机械耐久性测试,以确保光互连装置即使弯曲,也不会断裂或丢失数据。此外,研究人员还展示了 18 微米间距的聚合物光波导技术:将四个聚合物光波导设备堆叠在一起,可以实现多达128 个通道的连接。

IBM 持续引领半导体技术研发
面对日益增长的 AI 性能需求,光电共封装技术开创了一条新的通信途径,并可能取代从电子到光学的模块外通信。这一技术突破延续了IBM 在半导体创新方面的领导地位,包括全球首个 2 纳米芯片技术、首个 7 纳米和 5 纳米工艺技术、纳米片晶体管、垂直晶体管 (VTFET)、单芯片 DRAM 和化学放大光刻胶等。

该项目的设计、建模和模拟工作在美国纽约州奥尔巴尼完成,其原型组装和模块测试则由位于加拿大魁北克省布罗蒙的IBM实验室承接,后者是北美地区最大的芯片组装和测试基地之一。

[1] 从每比特 5 微焦降至不到 1 微焦。
[2]数据基于使用行业标准 GPU 和互连装置对 700 亿参数大语言模型的训练。
[3]数据基于使用行业标准 GPU 和互连装置对超大型大语言模型(如 GPT-4)的训练。


审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • IBM
    IBM
    +关注

    关注

    3

    文章

    1757

    浏览量

    74713
  • AI
    AI
    +关注

    关注

    87

    文章

    30979

    浏览量

    269252
  • 生成式AI
    +关注

    关注

    0

    文章

    504

    浏览量

    481
收藏 人收藏

    评论

    相关推荐

    智己汽车宣布IM AD 3.0实现"直觉"智驾新时代

    10月30日,在品牌智能驾驶技术日上,智己汽车宣布其IM AD 3.0智能驾驶系统已完成从“最像人”到“有直觉”的断代进化,为智能驾驶系统注入了人工智能生成的“直觉”,标志着智己汽车正式迈入“直觉”智驾新
    的头像 发表于 10-30 15:52 956次阅读

    OCTC发布"算力工厂"!力促智算中心高效规划建设投运

    创新提出面向未来数据中心的"算力工厂"模式,核心是以规(划)、建(设)、运(营)一体化的交钥匙工程,实现智算中心快速投运、绿色低碳,在当前AIGC算力供需挑战下,开创了智算中心建设运营的新思路、新方法,让客户在智算中心建设运营上更省心、更省力。
    的头像 发表于 10-11 09:10 522次阅读
    OCTC<b class='flag-5'>发布</b>&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;算力工厂&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;!力促智算中心高效规划建设投运

    软通动力携手华为启动&amp;quot;智链险界&amp;quot;计划,强化生态链接共启保险AI时代

    软通动力携子品牌软通金科受邀参加此次大会,发表&quot;智驭未来 • 探索保险AI新业态&quot;主旨演讲,并携手华为正式启动&quot;智链险界——保险生态场景链接计划&
    的头像 发表于 09-23 19:22 374次阅读
    软通动力携手华为启动&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;智链险界&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;计划,强化生态链接共启保险<b class='flag-5'>AI</b>新<b class='flag-5'>时代</b>

    IBM陈旭东:深耕中国初心不改,IBM需要&amp;quot;1+1>2&amp;quot;的伙伴生态

    探讨如何在全新竞争格局中突破增长瓶颈,通过跨界融合快速建立竞争优势,从而构建更广泛的合作伙伴生态。 在欢迎致辞中,IBM大中华区董事长、总经理陈旭东表示,四十年以来,IBM深耕中国市场的战略始终没有改变,伙伴生态将扮演更重要的角
    的头像 发表于 09-09 20:46 436次阅读
    <b class='flag-5'>IBM</b>陈旭东:深耕中国初心不改,<b class='flag-5'>IBM</b>需要&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;1+1>2&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;的伙伴生态

    网易副总裁庞大智畅谈&amp;quot;AI+游戏&amp;quot;无限潜能

    7月25日,上海浦东嘉里大酒店迎来了中国游戏产业界的年度盛事——ChinaJoy高峰william hill官网 CDEC。本次william hill官网 汇聚了行业精英,共同探讨在人工智能浪潮下,如何重新定位自我、把握时代脉搏、突破发展瓶颈。网易
    的头像 发表于 07-25 15:41 558次阅读

    全方位精准测量技术助力:中国经济加力发展向前&amp;amp;quot;进&amp;amp;quot;

    全方位精准测量技术助力:中国经济加力发展向前&quot;进&quot;
    的头像 发表于 07-15 09:53 365次阅读
    全方位精准测量<b class='flag-5'>技术</b>助力:中国经济加力发展向前&<b class='flag-5'>amp</b>;<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;进&<b class='flag-5'>amp</b>;<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;

    撷发科技COMPUTEX 2024展示先进&amp;quot;AI设计技术服务&amp;quot;和&amp;quot;全套IC设计解决方案&amp;quot;

    台北2024年6月3日 /美通社/ -- AI人工智能的应用,是全球科技产业最重要的议题,而创新IC设计更是先进AI芯片的决胜关键。重新定义IC设计可能性的撷发科技 (Microip Inc.
    的头像 发表于 06-03 19:57 373次阅读

    IBM发布2024年CEO调研报告:生成AI时代加速到来,企业文化和员工技能需要&amp;quot;同频共振&amp;quot;

    带来何种影响 北京2024年5月17日 /美通社/ -- IBM(纽交所代码:IBM)商业价值研究院的一项新调研发现,许多CEO在其组织实施和扩展生成
    的头像 发表于 05-22 11:17 312次阅读

    晶科能源荣获EUPD Research授予的六项&amp;quot;顶级光伏品牌&amp;quot;称号

    近日,由权威调研机构EUPD Research颁发,晶科能源在巴西、哥伦比亚、墨西哥、智利等拉美主要国家六个地区荣获 &quot;顶级光伏品牌 &quot;称号。凭借先进的技术、完善的流程和对卓越的不懈追求,晶科能源将继续提升行
    的头像 发表于 05-10 09:17 509次阅读
    晶科能源荣获EUPD Research授予的六项&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;顶级光伏品牌&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;称号

    浪潮信息发布企业大模型开发平台&amp;quot;元脑企智&amp;quot;EPAI,加速AI创新落地

    of AI),为企业AI大模型落地应用提供高效、易用、安全的端到端开发平台,提供数据准备、模型训练、知识检索、应用框架等系列工具,支持调度多元算力和多模算法,帮助企业高效开发部署生成
    的头像 发表于 04-18 21:21 471次阅读
    浪潮信息<b class='flag-5'>发布</b>企业大模型开发平台&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;元脑企智&<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;EPAI,加速<b class='flag-5'>AI</b>创新落地

    九联科技推出一款&amp;quot;射手座&amp;quot;UMA502-T7物联网模组

    在物联网技术飞速发展的时代背景下,九联科技凭借深厚的研发底蕴与创新精神,精心打造出象征着自由探索与勇敢进取精神的&quot;射手座&quot;UMA502-T7模组,以昂扬之姿挺进海外
    的头像 发表于 04-14 09:38 889次阅读

    科沃斯扫地机器人通过TÜV莱茵&amp;quot;防缠绕&amp;quot;和&amp;quot;高效边角清洁&amp;quot;认证

    3月15日,在2024中国家电及消费电子博览会(AWE)上,国际独立第三方检测、检验和认证机构德国莱茵TÜV大中华区(简称&quot;TÜV莱茵&quot;)为科沃斯两款扫地机器人(型号:DDX14、DDX11)
    的头像 发表于 03-17 10:49 874次阅读

    Quanterix宣布Tau217血液检测被美国FDA授予 &amp;quot;突破性器械 &amp;quot;认证

    3月4日,Quanterix宣布其Simoa磷酸化Tau217(p-Tau 217)血液检测已被美国FDA授予 &quot;突破性器械 &quot;认证,可用于阿尔茨海默病 (AD) 的辅助诊断评估。
    的头像 发表于 03-12 17:23 2334次阅读

    中创新航荣获逸动科技2023年度&amp;quot;优秀战略合作伙伴奖&amp;quot;

    近日,中创新航凭借电动船舶领域领先的技术实力、卓越的产品质量、持续稳定的交付能力以及优质高效的服务,荣获逸动科技2023年度&quot;优秀战略合作伙伴奖&quot;。
    的头像 发表于 02-29 13:51 500次阅读

    第二代配网行波故障预警与定位装置YT/XJ-001:守护电力线路的超能&amp;amp;quot;哨兵&amp;amp;quot;

    第二代配网行波故障预警与定位装置YT/XJ-001:守护电力线路的超能&quot;哨兵&quot; 电力,如同现代社会的血脉,支撑着我们的生活和工作正常运行。然而,一旦这条血脉出现故障,生活和工作
    的头像 发表于 01-22 15:11 557次阅读
    第二代配网行波故障预警与定位装置YT/XJ-001:守护电力线路的超能&<b class='flag-5'>amp</b>;<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;哨兵&<b class='flag-5'>amp</b>;<b class='flag-5'>amp</b>;<b class='flag-5'>quot</b>;