近日,北京大学杨玉超阐明和团队研发出一种可复旧多种职责模式的忆阻器,并将其与光晶体管进行集成,构建了一个具有可重构脾性的视觉感存算一体化集成阵列(MP1R加拿大pc28开奖记录,Multi-Phototransistor-One-Memristor) 与硬件系统。
这种系统不仅大概及时感知和处理图像,还大概通过新式硬件复旧多种神经网罗算法,克服现存视觉感知硬件在光图像信息处理和编码功能上的不及。
筹商中,其初次运用硅基兼容性工艺和材料制备了大概在三种职责模式下启动的忆阻器,区别是线性电阻模式、阈值开关转动模式和短时程操心模式。
这不仅经管了光忆阻器职责模式单一的局限性,还显耀普及了光感知与编码才智以及非线性狡计的才智。
具体而言,他们将具备蓝光增强和红光扼制脾性的光晶体管与可复旧多职责模式的莫特氧化物忆阻器集成,得手完毕了对不同光信息的感知、存储和狡计。
这种集成阵列大概在不同的光波长下进展出不同的反馈脾性,举例在蓝光下具有增强效应,而在红光下进展出扼制效应。
更蹙迫的是,这一集成系统具备了多种职责模式的编码才智,包括模拟编码和脉冲编码,大概模拟突触和神经元的功能,从而复旧多种神经网罗算法。
通过此,他们不仅经管了现存视觉神经形式硬件系统在算法兼容性和复杂信息处理才智上的不及,还得手构建了一个大概天真编程的可重构硬件系统。
实验表率标明,该系统大概复旧多种神经网罗算法和图像狡计任务,包括静态图像识别、时序脉冲图像编码处理和办法识别等。
总的来说,这一新式硬件平台为构建具有更高稳健性和遵守的视觉狡计系统提供了有劲复旧,具有宽敞的应用出路。
跟着该表率的技巧熟悉,将来几年内它有望在多个领域获得宽敞应用:
率先,在自动驾驶中,MP1R 阵列大概提供高效的视觉感知,并复旧及时办法识别和环境分析,提高自动驾驶系统的信息处理才智。
其次,机器东说念主领域也能受益于该技巧,机器东说念主不错通过智能视觉系统完成高效的办法识别、导航和任务引申。
再次,监控系统则能通过该技巧进行高效的事件检测和手脚识别,普及天下安全监控的智能化水平。
临了,MP1R 阵列在低功耗、高效处理下,适用于东说念主脸识别、智能医疗、增强履行(AR,Augmented Reality)/臆造履行(VR,Virtual Reality)系统以及无东说念主机视觉系统,提供及时的图像处理才智,鼓吹这些领域向智能化、自动化发展。
总体来看,这项技巧将在多个需要及时视觉狡计的场景中领略蹙迫作用,促进运筹帷幄行业的立异与跳跃。
本次筹商的开展源于传统视觉狡计系统在及时图像处理中的局限性。现存的视觉狡计系统大多基于互补金属氧化物半导体(CMOS,Complementary Metal Oxide Semiconductor)冯·诺依曼架构,这种架构由于图像传感器、存储器和处理器之间的物理分离,导致了数据处理蔓延和冗尾数据的产生,进而影响了及时图像处理的遵守。
甘肃省生态环境厅联合甘肃省人力资源和社会保障厅、甘肃省总工会印发《关于开展2024年甘肃省百万职工劳动和技能竞赛重点河流突发水污染事件“一河一策一图”实战应用大演练活动的通知》,成立由甘肃省生态环境厅党组书记和厅长担任双组长、相关部门单位分管厅级领导为副组长的活动领导小组,统筹协调大演练活动。活动坚持以赛促练、以练促学、赛练结合,围绕“能力要增强、我该会什么”开展专题练兵,推动全省88条重点河流“一河一策一图”符合实际“内容准”、灵活运用“掌握清”、应急处置“效果好”。
此外,现存的忆阻器技巧天然在机器视觉领域展示了高大后劲,但其在编码和处理光学数据方面的局限性,使得它与多种神经网罗架构的兼容性较差,无法知足复杂视觉任务的需求。
受到大脑神经元功能的启发,他们决定迷惑一种具有丰富能源学脾性的神经形式器件,旨在模拟神经突触和神经元的复杂功能。
筹商中,他们先是制备了异质结结构的氧化物忆阻器,这种忆阻器不仅具有格外丰富的能源学脾性,还大概模拟神经系统的种种性和复杂性。
同期,课题组将具有丰富动态脾性的忆阻器与光晶体管相皆集,借此迷惑出一个 20×20 边界的光晶体管阵列与忆阻器的集成系统。
这个集成阵列大概有用地处理光图像信息,具备时空编码、模拟编码和脉冲编码的多重功能。通过这种集成,他们大概在硬件层面上完毕对复杂光学信息的处理和狡计。
为了进一步考证和领略多光晶体管-单忆阻器集成阵列的功能上风,他们假想并迷惑了一个好意思满的视觉狡计硬件电路系统。
这个系统集成了 MP1R 忆阻器阵列与 1T1R 非易失性忆阻器阵列以及外围读写电路,完毕了硬件层面上对不同神经网罗算法的复旧,并展示了在多种视觉狡计应用场景中的本色进展。
通过此,最终他们得手展示了一个集成光感知、狡计和存储的视觉狡计硬件平台,并完毕了多种神经网罗算法和视觉狡计任务的演示。
这项筹商不仅是对神经形式狡计和光学图像处理的一次立异冲破,也为 AI 视觉系统的硬件完毕提供了新的想路和技巧旅途。
博士筹商生党丙杰是这项筹商中不行或缺的蹙迫成员。发轫,党丙杰的筹商主要蚁合在器件工艺和物理机理的探索上,之前也作念过一些视觉神经形式器件的运筹帷幄筹商,但其筹商主要蚁合在单个器件功能层面。
而杨玉超关于党丙杰的常识布景格外了解,深知他在器件工艺、狡计机和电路方面有着塌实的基础。
因此,杨玉超淡薄他不要只是局限于单一器件的筹商,而是将筹商表率蔓延到电路系统层面,追求一个好意思满、系统的筹商,而非盲目追求“短平快”的表率。
筹商中,杨玉超饱读动他领略我方的技巧上风,作念出有深度且有影响力的科研职责。党丙杰听后,花了几天时辰想考,并主动找杨玉超筹商。
他告诉杨玉超,他意志到真的应该更深入地挖掘筹商内容,作念出系统性表率,同期充分领略个东说念主特长,创造更有特质的科研表率。
最终,他字据杨玉超的淡薄,从器件工艺、器件机理,到阵列集成,再到电路硬件系统迷惑和功能演示,完成了一个全面的筹商,一语气了从器件到电路系统的统统历程。
这段履历让杨玉超深切感受到,带领和培养学生的科研教化至关蹙迫。要通过因材施教,充分了解学生的常识布景和上风,以便匡助他们在科研说念路上不休跳跃、作念出有深度、有影响力的表率。
最终,运筹帷幄论文以《基于多光敏电阻器-忆阻器阵列的可重构传感器内处理》(Reconfigurable in-sensor processing based on a multi-phototransistor–one-memristor array)为题发在Nature Electronics[1],北京大学集成电路学院/集成电路高精尖立异中心博士生毕业生党丙杰为第一作家,杨玉超担任通信作家。
尽管他们已得手迷惑出具有丰富动态脾性的忆阻器,并在完毕神经形式视觉硬件功能和架构方面展示了其上风,为构建通用神经形式视觉狡计平台作念出了蹙迫的筹商孝顺,但仍有多数职责需要完成。
将来,他们缱绻重心完毕三维集成,以提高系统的密度和狡计遵守。此外,还需要进一步优化器件的功耗,并提高其在天然光和暗光条目下的机灵度。
瞻望这些进展将为超低功耗、高密度、大边界三维集成的通用神经形式视觉狡计系统奠定基础,提供强劲的硬件平台和狡计才智,复旧视觉 AI 应用的发展。
参考辛勤:
1.Dang, B., Zhang, T., Wu, X. et al. Reconfigurable in-sensor processing based on a multi-phototransistor–one-memristor array.Nat Electron7, 991–1003 (2024). https://doi.org/10.1038/s41928-024-01280-3
运营/排版:何晨龙