传统的光计算应用过程,摘自ACCEL论文
图为传统的图像识别光计算应用过程,小车的图像是光信号输入,经过MZI光计算、D2NN(就是一种ONN,衍射深度神经网络)处理,形成了特征明显的光信号。但这些光信号要经过很多photodiode(光电二极管)转成电信号(基于光电效应),再从电信号经ADC(模数转换)变成数字信号进入计算机内存,还要跑一个小型数字神经网络全连接层(在光信号那里做不方便),最终形成识别结果,认出是小汽车。
这个传统光计算应用架构缺点很大。说是光子零能耗,但是大规模的光电转换、ADC转换非常耗能。光线在众多级联MZI、透镜掩码组里传播、干涉、衍射,这个过程并不是很靠谱,也就是“非线性”,元器件一多就不灵了。而且也不抗干扰,光线稍有点环境扰动结果就不对。相比之下,基于电子的芯片就很靠谱,信号在上百亿个晶体管之间传送都不会错。所以传统的光计算多年来都只能“展示潜力”,如果是关心前沿技术进展的朋友,会经常在文章中看到它,但从来不见它大规模应用。这就是因为它应用不方便,从光信号到数字信号过程生硬,光电融合得不好。
了解了这些背景,才能明白清华团队ACCEL的进步。它巧妙地融合了光子与电子各自的特性优势,所以叫光电融合芯片。ACCEL的全称是All-analog Chip Combining Electronic and Light computing,全模拟电光计算融合芯片,这里的重点除了光电融合,就是All-analog,全程模拟信号,省去了耗能的ADC环节。
ACCEL的架构
ACCEL的图像识别过程,分为OAC(Optical Analog Computing,光模拟计算)和EAC(Electronic Analog Computing,电模拟计算)两个环节。小车的光学图像包含极多光学信号,经过光学元器件阵列,不断进行“特征提取”,相当于用ONN实现深度神经网络运算,在OAC里生成了小量光学信号(但包含了关键信息)。OAC输出的光信号,经过少量光电二极管阵列转换(只有32 × 32个),变成电信号(仍然是模拟信号)。这些电信号在EAC里的SRAM阵列里传输,用巧妙的办法模拟了一个神经网络全连接层。最后电信号形成了简单的脉冲序列输出,完成识别过程。
【三大指数集体低开 创业板指跌近1%】沪指低开0.66%,深成指低开0.86%,创业板指低开0.97%,算力芯片、智慧灯杆、通感一体化等板块指数跌幅居前
2024-08-02 13:07:29三大指数集体低开在9月10日的凌晨1点,苹果的发布会拉开了帷幕。发布会上,苹果揭晓了其最新的A18芯片,这款芯片采用了先进的3纳米工艺制造,将首次装载于iPhone16系列之中
2024-09-10 08:50:04苹果A18芯片发布:CPU提升30%12月14日,2024科学家创新大会在雄安召开。会上,多位院士专家讨论了遥感产业的未来发展,认为推动算力“上天”将成为产业未来发展的大趋势
2024-12-17 02:16:45我国将构建天地一体化算力网络2024中国算力大会将于9月27日至29日在河南郑州举行,华为将参与此次大会,主题定为“共赢算力新时代”
2024-09-25 09:12:00华为将参加2024中国算力大会