最小、最節(jié)能的基于事件的視覺傳感器
2023-10-24 12:10:59 EETOP而基于事件的傳感器模仿眼睛和大腦處理圖像的方式,可以克服傳統(tǒng)的基于幀的機器視覺的障礙。
什么是基于事件的視覺傳感?
與以固定間隔捕獲一系列幀的傳統(tǒng)相機不同,基于事件的傳感器僅響應(yīng)場景的變化。傳感器中的每個像素獨立運行,僅在檢測到亮度發(fā)生顯著變化時才觸發(fā)輸出。
基于事件的傳感器模仿人眼的生物功能。圖片由索尼提供
該技術(shù)的一個主要優(yōu)點是它顯著減少了數(shù)據(jù)冗余。在靜態(tài)或緩慢變化的環(huán)境中,傳統(tǒng)相機捕獲和傳輸大量冗余數(shù)據(jù),浪費計算資源和能量。另一方面,基于事件的傳感器僅傳輸變化,從而減少計算、內(nèi)存和通信要求。這可以降低能耗,使這些傳感器適合電池供電和邊緣人工智能應(yīng)用。
除此之外,基于事件的傳感器在動態(tài)范圍和對不同照明條件的適應(yīng)性方面表現(xiàn)出色。每個像素都會根據(jù)入射光進(jìn)行調(diào)整,使傳感器能夠在高對比度場景中有效運行,例如涉及夜間汽車前燈的場景。此功能對于自動駕駛等應(yīng)用尤其重要,其中快速適應(yīng)不斷變化的照明條件對于安全至關(guān)重要。
接下來讓我看一個基于事件的視覺傳感器實列。
最近,法國神經(jīng)擬態(tài)視覺系統(tǒng)開發(fā)商 Prophesee 發(fā)布的其最新的基于事件的視覺傳感器。
該公司聲稱,該設(shè)備在性能和功效方面樹立了計算機視覺的新標(biāo)準(zhǔn),特別是與基于幀的成像相比。讓我們看一下 Prophesee 新型傳感器的技術(shù)細(xì)節(jié),并評估基于事件的視覺傳感的價值所在。
GenX320 簡介
最近推出的Prophesee GenX320 Metavision 傳感器標(biāo)志著 Prophesee基于事件的視覺硬件向前邁出了一步。該傳感器設(shè)計用于集成到超低功耗邊緣人工智能視覺設(shè)備中,例如 AR/VR 耳機、安全和監(jiān)控系統(tǒng)以及始終在線的智能物聯(lián)網(wǎng)設(shè)備。
GenX320提供超低功耗(典型值為 3 mW)、低延遲和高靈活性,這些都是在各種應(yīng)用中高效集成的基本功能。該傳感器的工作分辨率為 320 x 320,采用 6.3 μm 像素 BSI 堆疊基于事件的視覺技術(shù)。Prophesee 表示,這款緊湊型傳感器采用 3 x 4 mm 芯片尺寸,滿足嵌入式邊緣視覺系統(tǒng)獨特的能源、計算和尺寸要求。
Prophesee Metavision傳感器的工作原理
GenX320 的一個主要特點是其低延遲(1 us)分辨率的事件時間戳以及靈活的數(shù)據(jù)格式。片上智能電源管理模式進(jìn)一步增強了這一點,將功耗降低至 36 uW,同時還提供智能喚醒事件、深度睡眠和待機模式。據(jù)該公司稱,該設(shè)備的功率和尺寸相結(jié)合,使其被譽為世界上最小、最節(jié)能的基于事件的視覺傳感器。
該設(shè)備的其他值得注意的規(guī)格包括 0.05 lx 低光截止,可在黑暗環(huán)境中實現(xiàn)視覺捕獲,以及大于 120 dB 的動態(tài)范圍,可在極端照明環(huán)境中實現(xiàn)視覺捕獲。 GenX320 目前可分為四個部分:裸芯片、光學(xué)柔性模塊、評估套件和 STM32 Discovery 板適配器。
EETOP編譯整理自allaboutcircuits
關(guān)鍵詞: 視覺傳感器
EETOP 官方微信
創(chuàng)芯大講堂 在線教育
半導(dǎo)體創(chuàng)芯網(wǎng) 快訊
相關(guān)文章