我国科学家实现新一代光计算芯片研究新突破
微信公众号“科创闵行”消息,国科光计北京时间12月19日,学家新代上海交通大学集成电路学院(信息与电子工程学院)图像通信与网络工程研究所陈一彤课题组在新一代算力芯片领域取得重大突破,实现算芯湖北某某形象策划厂首次实现了支持大规模语义媒体生成模型的片研全光计算芯片,相关研究以“All-optical synthesis chip for large-scale intelligent semantic vision generation”(大规模智能语义视觉生成全光芯片)为题发表于国际顶级学术期刊《科学》(Science)上。究新上海交通大学为论文第一作者和通讯作者单位,突破陈一彤助理教授为第一作者及通讯作者。国科光计

随着深度神经网络和大规模生成模型的学家新代迅猛演进,AI正以前所未有的实现算芯速度革新世界。然而,片研湖北某某形象策划厂规模爆炸式增长的究新生成模型带来超高算力和能耗需求,与传统芯片架构的突破性能增长速度已出现日益严峻的紧迫缺口。

为突破算力与能耗瓶颈,国科光计光计算等新型架构受到广泛关注。学家新代然而如传统的实现算芯全光计算芯片主要局限于小规模、分类任务,光电级联或复用又会严重削弱光计算速度。因此,“如何让下一代算力光芯片能运行复杂生成模型”成为全球智能计算领域公认的难题。
研究团队首次提出全光大规模语义生成芯片LightGen,这也是国际首次实现的大规模全光生成式AI芯片,在单枚芯片上同时突破了百万级光学神经元集成、全光维度转换、无真值光芯片训练算法的领域公认瓶颈。

大规模全光生成计算芯片LightGen
论文实验验证了全光芯片LightGen在高分辨率(≥512×512)图像语义生成、3D生成(NeRF)、高清视频生成及语义调控、去噪、局部及全局特征迁移等多项大规模生成式任务。不再让电辅助光生成,而是让全光芯片完整实现输入图像、理解语义、语义操控、生成全新媒体数据的端到端过程,即让光“理解”和“认知”语义。

LightGen生成的采样图像示例
此外,LightGen采用了极严格的算力评价标准,在实现与电芯片上运行的Stable Diffusion、NeRF、Style Injection Diffusion等前沿电子神经网络相仿生成质量的同时,直接测量整个系统端到端的耗时与耗能降低。实测表明,即便采用较滞后性能的输入设备,LightGen仍可取得相比顶尖数字芯片2个和2个数量级的算力和能效提升。而如果采用前沿设备使得信号输入频率不是瓶颈的情况下,LightGen理论可实现算力提升7个数量级、能效提升8个数量级的性能跃升。这不仅直接体现了在不损失性能情况下替换顶尖现有芯片能获得的巨大算力和能效提升,也印证了解决大规模集成、全光维度变换、无真值光场训练等关键难点,全光片上实现大规模生成式网络的重要意义。
论文同步被《Science》官方选为高光论文重点报道。论文中提到,生成式AI正加速融入生产生活,要让“下一代算力芯片”在现代人工智能社会中真正实用,势在必行的是研发能够直接执行真实世界所需任务的芯片——尤其是大规模生成模型这类对端到端时延与能耗极其敏感的任务。面向这一目标,LightGen为新一代算力芯片真正助力前沿人工智能开辟了新路径,也为探索更高速、更高能效的生成式智能计算提供了新的研究方向。
陈一彤博士长期致力于光计算领域的研究,聚焦新一代算力芯片切实应用时的核心科学难点问题,团队所提出的全模拟光电芯片ACCEL(Nature 623 (7985), 48-57),国际首次实测验证了复杂智能任务中光计算的系统级算力优越性,将光计算芯片中的超高算力能效,无损地保留和接入复杂成熟的数字社会中。2023年,所提出的PED (Photonic Encoder Decoder,Science Advances 9(7), eadf8437)光计算架构,更被Science子刊认证为“国际首个全光生成网络(PED is the first demonstration of all-optical generative neural networks)”。基于上述研究基础,LightGen突破性将全光芯片的适用范围拓展到了大规模生成式神经网络,并已与工业界合作开展应用实践。
上海交通大学集成电路学院(信息与电子工程学院)陈一彤助理教授担任第一作者及通讯作者,翟广涛教授、张文军院士、博士生孙心玥,清华大学硕士生谭龙涛、博士生姜一洲、博士后周银等均对本文做出重要贡献。该研究得到了多项国家及上海市项目资助。
(责任编辑:热点)
-
据乌克兰方面消息,俄军22日凌晨空袭敖德萨州、扎波罗热州、第聂伯罗彼得罗夫斯克州和顿涅茨克地区的电力设施。截至22日早上,上述地区部分停电,其中敖德萨州出现大范围停电。 乌克兰DTEK能源公司发
...[详细]
-
10日,就网传“殡仪馆8个花篮收费13800元”,济南市民政局发布情况通报称,关注到网上有关殡仪服务费用问题的反映后,济南市民政局高度重视,要求市殡仪馆切实做好逝者的殡仪服务,妥善处理逝者后事。
...[详细]
-
在当今世界百年未有之大变局中,中国对外开放的步伐更加坚定有力。近年来,中国在打造制度型开放新高地方面进行了诸多有益探索和实践。作为制度型开放的主要载体,自由贸易试验区和自由贸易港发挥了“先行先试”
...[详细]
-
要说这豆橛子,在全国范围都蛮受欢迎的嘞。近日,湖南衡阳,常宁市两公职人员和一名教师夜里摘村民的豆角,被村民发现后,双方发生口角和冲突,7月8日,村民家属告诉记者老人并无大碍,但老人有个儿子受伤,已做伤
...[详细]
-
当地时间12月17日,欧盟方面透露,在结束谈判的六个月后,欧盟和英国最终敲定了欧盟和直布罗陀在英国脱欧后新关系的相关法令文本,这标志着法令的批准又向前迈进了一步,但尚未达到生效的最终阶段。 据悉
...[详细]
-
天津联合6个国家历时3年完成制定一项中医药国际标准2024-07-08 20:07:06 来源:中国新闻网
...[详细]
-
来源:钱江晚报 6月,杭州市区二手房共成交8849套,创下15个月以来新高。上半年二手房成交量则超过4.3万套,自2019年以来,排名第二,仅次于2021年上半年的5.5万套。上半年杭州二手房成
...[详细]
-
10日,就网传“殡仪馆8个花篮收费13800元”,济南市民政局发布情况通报称,关注到网上有关殡仪服务费用问题的反映后,济南市民政局高度重视,要求市殡仪馆切实做好逝者的殡仪服务,妥善处理逝者后事。
...[详细]
-
会上有记者提问称:据报道,日本国家安保局长市川惠一近日同英法德加等国沟通,就高市早苗涉台言论阐明日方立场并反驳中方说法,称高市首相的国会答辩并未改变日方一贯的对台立场。日本国内有人称,日本是“爱好
...[详细]
-
中新健康丨医疗卫生领域首部两岸共通标准在厦门发布2024-07-09 14:17:17 来源:中国新闻网 作
...[详细]

山东舰航母编队现身台岛以东,释放何种信号?