類視網膜仿生光電和圖像傳感器芯片
基于事件驅動方式的仿生視覺圖像傳感器,用于高速場景的拍攝
一、項目分類
關鍵核心技術突破、顯著效益成果轉化
二、成果簡介
隨著虛擬現實(VR)、增強現實(AR)和混合虛擬增強現實(MR)技術、自動駕駛、物聯網以及機器視覺等領域的飛速發展,對圖像傳感器的采集速度提出了更高的要求。傳統基于“幀”掃描形式的CMOS 或 CCD 圖像傳感器較難滿足高速運動物體的拍攝需求,若提高相機的圖像采集幀率,則需要采用高性能且結構復雜的模數轉換器,大量的圖像會帶來較大的數據冗余,此外,也會面臨功耗高的問題。
相比于傳統的光電和圖像傳感器,生物視網膜具有許多不可比擬的優勢。視網膜中的光感受器可根據外界光強的變化自適應調節增益,能夠感知超過 180dB 的光強范圍。另外,視網膜基于事件驅動式的采集方式,僅輸出場景中光強發生變化的信息,因而,能夠濾除低頻信息帶來的冗余。在信號處理和傳輸上,采用異步通信的方式,通過神經節細胞將光強信息轉換為時空脈沖信號,實現低功耗。
受到生物視網膜的啟發,研究人員提出了基于事件驅動方式的仿生視覺圖像傳感器,用于高速場景的拍攝。該類傳感器多采用對數像素電路作為光強探測單元,因其動態響應范圍寬,可隨機讀取。然而,對數電路在弱光環境下靈敏度低,幾乎沒有光響應,即仍然無法模仿視網膜弱光下的高靈敏度,除此之外,其輸出受到 (Fixed Pattern Noise,FPN)的影響,降低了圖像質量。
我們提出了一種兼容 CMOS 工藝的光敏二極管體偏置場效應晶體管器件(PD- body biased MOSFET,簡稱 PD-MOS),其結構圖和等效電路如圖 1所示。
利用 PD 的感光特性以及 MOSFET 的正向襯底偏置效應實現集成光強探測及信號放大于一體的光電器件。該器件可解決對數電路在弱光下靈敏度低的問題,并且提出了一種明暗傳感器的方案以降低噪聲。設計成像測試方案并搭建靜態圖像采集測試系統,實現靜態顯示,通過 MTALAB 進行圖像恢復從而實現動態圖像顯示功能。
圖 1 (a) PD-MOS 器件結構及其 (b) 等效電路圖
經過商用 180nm CMOS 工藝流程制備后的器件概貌如圖 2 所示,圖 (a) 為三種不同像素設計的芯片實物圖,從上至下分別為環形結構、條形結構及對數像素電路,將其中的環形結構在顯微鏡下放大觀察可看到圖 (b) 所示的形貌,圖 (c) 為4個像素的顯微圖。
圖 2 (a) PD-MOS 成像陣列芯片的實物圖,(b) 環形結構芯片在顯微鏡下的放大圖以及 (c) 環形結構像素放大圖
上位機實時顯示效果如圖3所示,可以明顯看出兩根頭發相交。子圖 (a) 為暗態時的 100 幀平均灰度圖,子圖 (b) 為暗態時的曲面圖,子圖 (c) (e) (g) (i) 為光態下的圖,子圖 (d) (f) (h) (j) 為光態下的圖像數據減去暗態下圖像數據的降噪圖,可以發現在30nw/cm2 輻照度下已經出現頭發的輪廓,當輻照度繼續增加,頭發的輪廓越來越清晰,當輻照度達到 3mw/cm2,仍然可以看到頭發的輪廓。
圖 3 陣列芯片采集的圖像
不同于傳統計算機視覺系統的圖像采集方式,生物視覺系統的成像由視野場景中發生的事件觸發,且生物視網膜具有寬動態響應范圍、超低功耗以及異步傳輸等特點,這為仿生視覺系統的研究提供了全新的思路。隨著物聯網、自動駕駛以及安防等領域的快速發展,它們對高速動態圖像傳感器的需求也日益提升。近些年,針對這些需求,研究人員提出了一種用于采集高速動態信息的類視網膜相機,成為了一大熱點研究方向。類視網膜相機的工作原理模擬了生物視網膜事件驅動型的采集方式及異步型的傳輸模式,為動態視覺成像提供了硬件基礎。綜上,該類傳感器的研究具有十分重要的科研意義和深遠的經濟價值。
中山大學
2022-08-15