在人脑处理的信息中,超过80%都是通过眼睛获得的。人眼不仅可以进行信息的探测和同步处理,而且整体功耗极小(远小于20瓦)。因此,构建一个可以媲美人眼、具备同步进行信息探测和处理功能的类脑视觉传感器是人们一直追求的梦想,对于智能工业、自动驾驶、智能安防等应用的发展也至关重要。近日,南京大学物理学院缪峰团队在类脑视觉传感器方面取得重要进展,成果以GatetunablevanderWaalsheterostructureforreconfigurableneuralnetworkvisionsensor(基于栅极可调范德华异质结的可重构神经网络视觉传感器)为题于年6月24日发表在《科学》杂志子刊ScienceAdvances上。
南京大学物理学院博士生王晨宇和梁世军副研究员为共同第一作者,缪峰教授和美国麻省大学的杨建华教授为该工作的共同通讯作者,该工作同时得到了王振林教授课题组、陈坤基教授课题组和王肖沐教授课题组的实验协助,和国家杰出青年科学基金、国家自然科学基金等项目的资助,以及微结构科学与技术协同创新中心的支持。
人类视觉系统强大的信息处理能力很大程度上依赖于视网膜的结构和功能。视网膜中的主要细胞包括感光细胞、双极细胞等,这些细胞之间是垂直分层分布的结构。光透过瞳孔入射到视网膜上后,感光细胞将入射光转换为电学信号,流经双极性细胞,利用双极性细胞的生物特性对电学信息进行一定的加工和处理,加工后的图像信息仅仅保留其主要的特征,再传输至大脑皮层进行进一步的图像处理和理解。通过这种方式,视网膜在一定程度上实现了信息探测和处理的同步进行。为了实现对视网膜结构和功能的逼真模拟,在该工作中,缪峰团队提出可以通过原子乐高的方式搭建基于二维材料垂直异质结的类脑视觉传感器,这些垂直结构不仅能够自然地模仿视网膜的垂直分层结构,而且异质结中包含的不同二维材料可被用来模拟视网膜中不同细胞的功能。
在实验中,缪峰团队首先将机械剥离的薄层硒化钨和氮化硼以及氧化铝制备成垂直异质结器件。该异质结器件在无背栅或者正背栅电压作用下,呈现出正的光电导行为,类似于双极细胞的正的光响应;当所加背栅电压为负的时候,器件展现出了负光电响应特征与双极细胞的负响应类似。研究团队通过一系列的对比实验结果,指出器件的负光学响应来源于光引诱发带电杂质产生的电场屏蔽效应。通过控制垂直异质结器件的栅压,团队首次实现了对感光细胞和双极细胞的生物功能的模拟,器件的响应时间和功耗均接近人类视网膜的水平(图1)。
图1.视网膜和视网膜形态器件。(a)视网膜的垂直分层结构包括了视锥细胞和双极性细胞以及视神经节细胞;(b)双极性细胞在不同刺激条件下所具有的生物光学响应特征;(c)类视网膜形态器件的光学图;(d)垂直异质结器件在不同栅压作用下展现出不同的光学响应,类似于视网膜结构中双极性细胞的生物特征。
图2.可重构的视网膜形态芯片及其不同的图像信息处理方式。(a)背栅独立控制的可重构视觉传感器阵列示意图;利用传感器阵列对南京大学校徽图片进行(b)图像风格化(c)边缘增强(d)强度校正处理,所处理后的图片信息和采用相同卷积核的模拟结果一致。
进一步,研究团队将垂直异质结器件组装成的一个阵列,利用异质结器件栅压可调的光电响应特征,将图像处理中常用的数学卷积核映射到的器件阵列中,实现了可重构的图像信息处理功能(图2),包括边缘增强、图像风格化、图像强度校正等。研究发现这些实验结果与采用相同卷积核处理后的模拟结果一致,这表明基于垂直异质结阵列能够被用于在硬件上直接进行图片信息的处理。
图3.基于范德华异质结视觉形态的传感器神经网络及训练示意图和识别结果。(a)待识别的图片字母信息;(b)异质结视觉形态传感器神经网络训练示意图;(c)N,J,U三类字母平均识别结果与训练次数的关系;(d)N,J,U三类字母的分类情况与训练次数的关系。
基于范德华异质结器件的功能应用除了同步的探测和信息的处理之外,研究团队发现器件阵列还可以用于图片的分类任务。通过将器件电导作为神经网络的权值,背栅的调节变化作为更新神经网络权值的一种手段,范德华异质结器件阵列可以执行神经网络的功能。研究团队在实验中采用软件辅助硬件的训练方法实现了对输入图像N,J,U字母的快速识别(图3)。这一项工作从原理上证明,利用范德华异质结的特性模拟人类视网膜结构和功能的研究思路有望将来被用来实现新型的类脑视觉芯片。
二维材料有望成为后摩尔时代重要的基础电子材料,该领域的发展也让人们可以对原子层材料进行乐高式的堆叠和集成。近年来,缪峰团队利用原子乐高分别在耐高温忆阻器(NatureElectronics)、弹道雪崩探测器件(NatureNanotechnology)、室温高灵敏红外探测器(ScienceAdvances)等方向取得突破,在此基础上,该团队提出的利用二维材料范德华异质结器件的结构特点和可调的光响应特性,能够实现对人眼视网膜的层状结构和感光细胞、双极细胞的生物特性模拟,基于这种类视网膜形态器件,团队进一步构建了能够对感知的图片信息进行同步处理的类脑视觉器件阵列。该工作有望为未来开发基于范德华异质结的新型类脑视觉芯片提供物理和技术基础。
目前,基于人工神经网络概念的深度学习正在飞速发展,被广泛地应用在诸如语音识别、图像识别、自然语言处理等领域。尽管如此,领域内很多资深人士认为,人工智能发展的终极路线还是需要在硬件上成功实现模拟人脑的电子大脑。
缪峰团队除了在类脑视觉传感器方面取得重要进展外,日前该团队在可重构类脑电路方面也取得了重要突破。团队提出,利用二维层状半导体材料二硒化钨(WSe2)的双极性场效应特性和可变的漏端电压极性,可以设计出电场可调的二维同质结器件,从而在器件层面实现可重构的多种电流开关特性。进一步通过对器件进行集成,团队分别实现了功能可重构的逻辑和类脑电路,与实现同样功能的传统电路相比,该技术所需晶体管数量大大减少,成功实现瘦身。相关研究成果以Reconfigurablelogicandneuromorphiccircuitsbasedonelectricallytunabletwo-dimensionalhomojunctions(基于电场可调二维同质结的可重构逻辑和神经形态电路)为题于年6月29日发表在《自然》杂志子刊NatureElectronics(自然-电子学)上。南京大学物理学院博士生潘晨为论文的第一作者,缪峰教授和梁世军副研究员为该工作的共同通讯作者。
拓展阅读
缪峰,南京大学物理学院和南京微结构国家实验室教授、博士生导师。国家杰出青年科学基金获得者,国家高层次人才特殊支持计划科技创新领军人才入选者,科技部中青年科技创新领军人才入选者,科技部国家重大科学研究计划(青年)项目首席科学家,国家海外高层次青年人才计划入选者,江苏省十大青年科技之星(暨江苏省青年科技奖)入选者,科睿唯安(ClarivateAnalytics)全球高被引科学家。主要从事二维材料电学性质的基础研究,以及二维材料在信息器件领域的应用研究。具体研究方向包括二维材料的量子电子输运与物性调控,场效应电子器件,光电探测器,存储器与类脑计算器件等。在二维材料电子输运与信息器件领域取得了一系列创新成果,多项工作在国际同行中产生重要影响。作为第一作者或通讯作者在Science、Nature/Science子刊(8篇)、Phys.Rev.Lett.等国际权威学术期刊上发表论文,共发表SCI论文90余篇,总引用余次;已获授权美国专利9项,中国发明专利4项。