最小、最節能的基于事件的視覺傳感器
2023-10-24 12:10:59 EETOP而基于事件的傳感器模仿眼睛和大腦處理圖像的方式,可以克服傳統的基于幀的機器視覺的障礙。
什么是基于事件的視覺傳感?
與以固定間隔捕獲一系列幀的傳統相機不同,基于事件的傳感器僅響應場景的變化。傳感器中的每個像素獨立運行,僅在檢測到亮度發生顯著變化時才觸發輸出。
基于事件的傳感器模仿人眼的生物功能。圖片由索尼提供
該技術的一個主要優點是它顯著減少了數據冗余。在靜態或緩慢變化的環境中,傳統相機捕獲和傳輸大量冗余數據,浪費計算資源和能量。另一方面,基于事件的傳感器僅傳輸變化,從而減少計算、內存和通信要求。這可以降低能耗,使這些傳感器適合電池供電和邊緣人工智能應用。
除此之外,基于事件的傳感器在動態范圍和對不同照明條件的適應性方面表現出色。每個像素都會根據入射光進行調整,使傳感器能夠在高對比度場景中有效運行,例如涉及夜間汽車前燈的場景。此功能對于自動駕駛等應用尤其重要,其中快速適應不斷變化的照明條件對于安全至關重要。
接下來讓我看一個基于事件的視覺傳感器實列。
最近,法國神經擬態視覺系統開發商 Prophesee 發布的其最新的基于事件的視覺傳感器。
該公司聲稱,該設備在性能和功效方面樹立了計算機視覺的新標準,特別是與基于幀的成像相比。讓我們看一下 Prophesee 新型傳感器的技術細節,并評估基于事件的視覺傳感的價值所在。
GenX320 簡介
最近推出的Prophesee GenX320 Metavision 傳感器標志著 Prophesee基于事件的視覺硬件向前邁出了一步。該傳感器設計用于集成到超低功耗邊緣人工智能視覺設備中,例如 AR/VR 耳機、安全和監控系統以及始終在線的智能物聯網設備。
GenX320提供超低功耗(典型值為 3 mW)、低延遲和高靈活性,這些都是在各種應用中高效集成的基本功能。該傳感器的工作分辨率為 320 x 320,采用 6.3 μm 像素 BSI 堆疊基于事件的視覺技術。Prophesee 表示,這款緊湊型傳感器采用 3 x 4 mm 芯片尺寸,滿足嵌入式邊緣視覺系統獨特的能源、計算和尺寸要求。
Prophesee Metavision傳感器的工作原理
GenX320 的一個主要特點是其低延遲(1 us)分辨率的事件時間戳以及靈活的數據格式。片上智能電源管理模式進一步增強了這一點,將功耗降低至 36 uW,同時還提供智能喚醒事件、深度睡眠和待機模式。據該公司稱,該設備的功率和尺寸相結合,使其被譽為世界上最小、最節能的基于事件的視覺傳感器。
該設備的其他值得注意的規格包括 0.05 lx 低光截止,可在黑暗環境中實現視覺捕獲,以及大于 120 dB 的動態范圍,可在極端照明環境中實現視覺捕獲。 GenX320 目前可分為四個部分:裸芯片、光學柔性模塊、評估套件和 STM32 Discovery 板適配器。
EETOP編譯整理自allaboutcircuits
關鍵詞: 視覺傳感器