近日,清華大學(xué)集成電路學(xué)院團隊在《自然?納米技術(shù)》(Nature Nanotechnology) 發(fā)表了題為“面向多場(chǎng)景感內計算的全集成多模態(tài)光電憶阻器陣列” (Fully integrated multi-mode optoelectronic memristor array for diversified in-sensor computing) 的成果論文。清華大學(xué)集成電路學(xué)院唐建石副教授、吳華強教授和信息國家研究中心王鈺言副研究員是本論文的共同通訊作者,集成電路學(xué)院博士后黃河意是第一作者(現任中國科學(xué)院微電子研究所副研究員),合作者包括清華大學(xué)戴瓊海院士、方璐教授、錢(qián)鶴教授、高濱副教授、姚鵬副研究員等。
人工智能視覺(jué)系統在自動(dòng)駕駛、具身智能等領(lǐng)域中發(fā)揮著(zhù)至關(guān)重要的作用。在傳統視覺(jué)芯片架構中,由于傳感、計算和存儲單元的分離導致大量數據的轉換和傳輸,帶來(lái)了延時(shí)和能耗開(kāi)銷(xiāo)。受生物視覺(jué)系統啟發(fā)的感內計算(in-sensor computing)架構應運而生,因其能在傳感端進(jìn)行原位信息處理,實(shí)現感存算一體化,減少數據冗余傳輸,降低系統延時(shí)與能耗,展現出巨大潛力。然而,視覺(jué)感內計算研究尚處于起步階段:在硬件層面,當前研究大多聚焦于單個(gè)光電感存算一體化器件,缺少將大規模陣列與硅CMOS電路有效集成的方案;在算法架構層面,當前演示的感內計算功能較為單一,難以支撐復雜視覺(jué)信息處理任務(wù)。
針對上述挑戰,清華大學(xué)集成電路學(xué)院團隊研制了具有多模態(tài)的感存算一體化光電憶阻器陣列,搭建了單片集成的感內計算原型系統,用于處理多階視覺(jué)任務(wù)。該系統片上集成了1kb(1024個(gè))1T-1OEM光電憶阻器陣列與硅CMOS外圍電路(圖1),基于TiOx/ZnO的新型光電憶阻器具有多種工作模式,包括電學(xué)憶阻器(EM)、動(dòng)態(tài)光電憶阻器(D-OEM)和非易失性光電憶阻器(NV-OEM)模式,這些模式可通過(guò)光電激勵引發(fā)的電荷密度分布變化來(lái)進(jìn)行有效調控。通過(guò)對光電憶阻器陣列配置不同的工作模式,研究團隊成功演示了從低階到高階的智能視覺(jué)信息處理任務(wù),具有高準確率與低能耗的優(yōu)勢,為復雜場(chǎng)景智能視覺(jué)應用提供了一個(gè)高效的硬件平臺。
圖1. 多模態(tài)感存算一體化光電憶阻器陣列:片上集成1kb光電憶阻器1T-1OEM單元和硅CMOS外圍電路
在該工作中,研究團隊設計并制備了一種新型的雙層氧化物光電憶阻器,其結構為Pd/TiOx/ZnO/TiN,在器件中引入TiOx界面層以增強阻變的穩定性并提升光電響應。通過(guò)光電激勵可以調控器件三種不同的工作模式(圖2):原始狀態(tài)為光電脈沖激勵下的動(dòng)態(tài)響應模式、電壓脈沖激勵下的循環(huán)阻變模式以及在電學(xué)Forming后的非易失性光電響應模式。為進(jìn)一步闡明光電憶阻器的多模態(tài)調控機制,團隊采用了差分相位對比掃描透射電子顯微鏡(DPC-STEM)這一前沿成像技術(shù),精確觀(guān)測了光電調控過(guò)程中ZnO內部電荷密度的分布變化,這些觀(guān)察結果為理解器件光電響應模式的調控提供了有力支撐。
圖2. 光電憶阻器的三種不同工作模式及其電荷密度分布變化
在此基礎上,研究團隊進(jìn)一步通過(guò)CMOS后道兼容工藝,將1024個(gè)1T-1OEM光電憶阻器單元組成的128×8陣列集成到硅基CMOS譯碼電路的上方,通過(guò)光電測試驗證該陣列具有良好的均一性與穩定性,同時(shí)可以實(shí)現多比特編程(圖3)和感存算一體化功能。
圖3. 多模態(tài)光電憶阻器陣列的性能測試
基于該光電憶阻器陣列,研究團隊演示了多種場(chǎng)景的智能視覺(jué)信息處理任務(wù):在圖像傳感預處理任務(wù)中,利用NV-OEM模式可以將圖像識別率從85.7%提升至97.6%;在高階認知任務(wù)中,利用D-OEM與NV-OEM陣列協(xié)同工作演示多目標定位跟蹤,在模擬環(huán)境噪聲的干擾下,通過(guò)多次訓練依然可以實(shí)現96.1%的高準確率;在此基礎上,首次構建了基于全光電憶阻器的儲備池計算系統,由18個(gè)D-OEM模式器件構成儲備池層和1024×5個(gè)EM模式器件構成讀出層,在人體運動(dòng)識別任務(wù)中以極低能耗實(shí)現了91.2%的準確率。
圖4. 基于多模態(tài)光電憶阻器陣列實(shí)現多場(chǎng)景智能視覺(jué)任務(wù)處理
相關(guān)成果以“面向多場(chǎng)景感內計算的全集成多模態(tài)光電憶阻器陣列”(Fully integrated multi-mode optoelectronic memristor array for diversified in-sensor computing)為題在線(xiàn)發(fā)表在《自然?納米技術(shù)》(Nature Nanotechnology)上。清華大學(xué)集成電路學(xué)院唐建石副教授、吳華強教授和信息國家研究中心王鈺言副研究員是本論文的共同通訊作者,集成電路學(xué)院博士后黃河意是第一作者(現任中國科學(xué)院微電子研究所副研究員),合作者包括清華大學(xué)戴瓊海院士、方璐教授、錢(qián)鶴教授、高濱副教授、姚鵬副研究員等。該研究得到了科技部重大項目、國家自然科學(xué)基金、北京信息科學(xué)與技術(shù)國家研究中心、北京集成電路高精尖創(chuàng )新中心、科學(xué)探索獎等支持。
論文鏈接:https://www.nature.com/articles/s41565-024-01794-z