PROPHESEE Metavision? 智能手機影像去模糊解決方案可投入量產，針對第三代驍龍 8 移動平臺全面優化
2024-02-28 10:45:05 PROPHESEE在世界移動通信大會（MWC）上，基于與高通多年的合作沉淀，Prophesee 展示了新一代無模糊的手機攝影技術。目前客戶可將該技術集成到支持第三代驍龍 8 移動平臺的設備中。
2024 年 2 月 27 日，中國上海——領先的神經擬態視覺傳感公司 Prophesee 今日宣布，與高通技術公司的合作進入可量產階段。在巴塞羅那世界移動通信大會（MWC）期間，Prophesee 展示了其解決方案與驍龍?旗艦移動平臺的原生兼容性，以及神經擬態視覺技術為智能手機攝像頭帶來的速度、能效和成像質量方面的提升。
圖 1: 高通在驍龍峰會主會場介紹 Prophesee Metavision 解決方案
Prophesee Metavision 事件視覺傳感器和人工智能算法針對驍龍平臺進行了優化，使運動模糊消除（motion blur cancellation）的效果和整體圖像的質量都得到前所未有的提升，尤其是在快速移動和低光等傳統基于幀的 RGB 傳感器難以應對的場景中。
圖 2、3、4：使用 Metavision 傳感 + AI算法，在搭載第三代驍龍 8 移動平臺的設備上拍攝世界著名的巴黎歌劇院芭蕾舞團的舞者，實現去模糊效果
Prophesee 首席執行官兼聯合創始人 Luca Verre 表示：“自 2023 年 2 月宣布合作以來，如今我們已取得了重大進展，證明了 Prophesee 事件視覺技術對提升搭載驍龍移動平臺智能手機影像質量的顯著作用，這是里程碑式的技術進步。現在，我們很高興宣布 Metavision Deblur 解決方案已準備就緒，可投入生產。我們期待通過 Prophesee Metavision 解決方案為新一代智能手機解鎖更強大的影像和視頻功能。”
高通技術公司產品管理副總裁 Judd Heape 表示：“我們很高興繼續與 Prophesee 保持緊密合作，協力推動 Prophesee Metavision 事件視覺技術與第三代驍龍 8 旗艦移動平臺的無縫兼容。這將顯著提升手機影像質量，同時為搭載驍龍移動平臺的智能設備解鎖更多基于事件相機的免快門功能的新潛能。”
工作原理
Prophesee 突破性的事件視覺傳感器能夠為手機攝影提供全新的感知維度。由于事件視覺傳感僅關注場景中的動態變化，能夠迅速響應并連續追蹤像素變化，從而打破了傳統的成像范式。
Metavision 傳感器中的每個像素都有一個內嵌的邏輯核（logic core），使其能夠作為神經元來工作。 每個像素都能根據各自感應到的光子數量，異步且智能地激活自身。像素的每次激活稱為一個“事件（event）”，因此在本質上，事件是由場景動態驅動的，其采集速度也始終與實際場景動態相匹配。
通過同步 Prophesee 事件傳感器和基于幀的傳感器的數據，手機攝影可以實現高性能的圖像去模糊。系統能夠將事件傳感器以微秒為單位記錄的事件填充到兩幀圖像的間隙，通過算法提取純動態信息，從而修復運動模糊。
