界面新聞?dòng)浾?| 彭新

這是Luca Verre今年第二次到訪中國(guó)，他來(lái)參加在中國(guó)上海舉辦的世界移動(dòng)通信大會(huì)。他在專訪中告訴界面新聞，除了MWC，他這次來(lái)中國(guó)的行程計(jì)劃還包括與上海團(tuán)隊(duì)的項(xiàng)目跟進(jìn)、與投資人交流等事宜。

Luca Verre是傳感器公司Prophesee的首席執(zhí)行官，也是這家法國(guó)巴黎誕生的初創(chuàng)公司的聯(lián)合創(chuàng)始人，在一眾半導(dǎo)體創(chuàng)業(yè)企業(yè)中，Prophesee所涉足的視覺傳感器，仍是一個(gè)外界了解較少的小眾賽道，但憑借自身開創(chuàng)的獨(dú)特技術(shù)——“基于事件的傳感器”，有望創(chuàng)造新的應(yīng)用領(lǐng)域。

(資料圖片僅供參考)

所謂基于事件的傳感器（EVS），其起源于視覺神經(jīng)的信號(hào)模擬，是一種模仿眼睛的感光機(jī)制而建立的仿生傳感器技術(shù)：人眼感受到光線后，視網(wǎng)膜上的受體細(xì)胞就會(huì)將光信號(hào)轉(zhuǎn)換成神經(jīng)信息，后段的神經(jīng)細(xì)胞再分別挑選出亮部和暗部，經(jīng)由神經(jīng)節(jié)細(xì)胞，將信息傳遞到大腦的視覺皮層。

EVS則如同人類視覺神經(jīng)，射入傳感器的光線會(huì)轉(zhuǎn)換成電氣信號(hào)。電氣信號(hào)通過放大器，由比較器根據(jù)亮度變化進(jìn)行分離，形成變亮信號(hào)和變暗信號(hào)，然后再通過后段的信號(hào)處理，以EVS圖像數(shù)據(jù)的形式輸出。因此，EVS是一種只對(duì)亮度變化敏感并輸出圖像的視覺傳感器。

Luca Verre介紹，事件視覺技術(shù)的優(yōu)勢(shì)在于捕獲動(dòng)態(tài)信息、時(shí)間信息，這些信息可以很好地和CMOS RGB 傳感器的信息實(shí)現(xiàn)互補(bǔ)，或是和ToF 或者激光雷達(dá)收集的3D 信息互補(bǔ)。這種傳感器模式的組合可以形成更具價(jià)值的解決方案。

在EVS的制造上，主要是在索尼幫助下完成的，生產(chǎn)出的EVS傳感器成品提供給客戶，目前在索尼半導(dǎo)體部門的官網(wǎng)上，已經(jīng)有兩款EVS傳感器對(duì)外提供。根據(jù)Prophesee介紹，借助索尼生產(chǎn)圖形傳感器的經(jīng)驗(yàn)，使得EVS傳感器得以大規(guī)模量產(chǎn)，實(shí)現(xiàn)優(yōu)秀的拍攝性能并降低成本。

實(shí)際上，EVS作為一類新型傳感器，更重要的是為其尋找落地場(chǎng)景，據(jù)索尼半導(dǎo)體部門的相關(guān)研發(fā)人員介紹，早期“最大的難題是向客戶介紹EVS后，一開始大家都對(duì)這款獨(dú)特的傳感器產(chǎn)生了濃厚興趣，覺得很有趣，但是一旦討論到它的應(yīng)用，客戶往往不知道要如何使用，因此始終難以進(jìn)入下一個(gè)階段?！?/p>

這也是Luca Verre時(shí)常需要思考的問題。

傳感器細(xì)分賽道專業(yè)且龐雜，距大眾生活看似較遠(yuǎn)，但其所應(yīng)用的一些領(lǐng)域卻也和平常人的生活息息相關(guān)，如作為手機(jī)、汽車等設(shè)備“眼睛”攝像頭，內(nèi)藏的圖像傳感器是核心部件，過去主要以傳統(tǒng)CMOS傳感器（CIS）為主。根據(jù)市場(chǎng)調(diào)研公司Counterpoint數(shù)據(jù)，2022年CIS全球單位出貨市場(chǎng)規(guī)模為190億美元。其中，移動(dòng)手機(jī)占據(jù)的份額最高，為132億美元。

給手機(jī)裝上不一樣的“眼睛”，是Prophesee力圖在消費(fèi)市場(chǎng)達(dá)到的成績(jī)，并選擇了一個(gè)手機(jī)攝像的常用功能“去模糊（deblur）”作為切入點(diǎn)，其基本原理是EVS傳感器配合傳統(tǒng)傳感器的數(shù)據(jù)，系統(tǒng)能夠?qū)VS以微秒為單位記錄的事件填充到兩幀圖像的間隙，通過算法提取純動(dòng)態(tài)信息，從而修復(fù)運(yùn)動(dòng)模糊。從Prophesee向界面新聞提供的Demo來(lái)看，這一功能令人印象深刻。

與高通的合作也將為EVS進(jìn)入手機(jī)市場(chǎng)降低難度，“我們和高通以及其他一些手機(jī)OEM廠商合作，將我們的傳感器和常規(guī)RGB 傳感器結(jié)合，用于提升手機(jī)攝影的圖像質(zhì)量，用于圖像去模糊?！盠uca Verre稱。

EVS傳感器以及Prophesee的去模糊算法，與高通的驍龍手機(jī)平臺(tái)整合后，有利于進(jìn)一步打開市場(chǎng)，“我們跟高通的合作非常具有戰(zhàn)略意義。高通是高端旗艦手機(jī)應(yīng)用處理器的市場(chǎng)領(lǐng)導(dǎo)者，我們和高通合作，把Prophesee Metavision傳感器和高通驍龍SoC結(jié)合，提高手機(jī)影像質(zhì)量，我們也一起向一些手機(jī)OEM廠商推廣我們的解決方案?！盠uca Verre稱，強(qiáng)調(diào)與高通的合作時(shí)一次“長(zhǎng)期合作”，并暗示搭載EVS的手機(jī)將會(huì)很快推出。

除了手機(jī)，VR/AR頭顯也是Luca Verre一直密切關(guān)注的產(chǎn)品。北京時(shí)間6月6日凌晨，蘋果推出第一款XR（混合現(xiàn)實(shí)）頭戴顯示設(shè)備Apple Vision Pro和操作系統(tǒng)VisionOS，將在2024年早些時(shí)候登陸美國(guó)市場(chǎng)，隨后擴(kuò)展至其他國(guó)家。Vision Pro內(nèi)外部生態(tài)結(jié)合，通過虛擬鍵盤、眼球追蹤、手勢(shì)控制等新型交互方式落地辦公、娛樂等場(chǎng)景，無(wú)疑對(duì)于傳感器的要求也會(huì)有不少。

蘋果Vision Pro頭顯引發(fā)了對(duì)XR話題的廣泛關(guān)注，尤其是在眼球追蹤和手勢(shì)識(shí)別上取得了很好的效果，這被認(rèn)為是所謂“空間計(jì)算”的關(guān)鍵交互技術(shù)。

手機(jī)和XR都是Prophesee在消費(fèi)級(jí)市場(chǎng)布局的一部分，“有很多XR廠商對(duì)我們的事件視覺技術(shù)顯示出了濃厚興趣，目前我們也有和一些客戶在積極探討和評(píng)估相關(guān)的應(yīng)用場(chǎng)景，”Luca Verre稱，蘋果的示范效應(yīng)帶來(lái)的外界對(duì)XR產(chǎn)品的好奇心，也為后來(lái)者“打樣”，從Prophesee與XR廠商的討論來(lái)看，眼球追蹤（eye tracking）、手部追蹤或手勢(shì)控制以及實(shí)時(shí)定位與地圖構(gòu)建（ SLAM） 將是EVS傳感器在XR領(lǐng)域發(fā)揮用途。

在產(chǎn)品和資本關(guān)系上，Prophesee與中國(guó)聯(lián)系緊密，為進(jìn)一步增強(qiáng)在相關(guān)市場(chǎng)的競(jìng)爭(zhēng)力，Prophesee在2021年7月完成了一筆五千萬(wàn)歐元的C輪融資，投資方包括中國(guó)的創(chuàng)新工場(chǎng)、惠友資本、小米及上海韋豪創(chuàng)芯等。

Luca Verre稱，中國(guó)對(duì)Prophesee來(lái)說(shuō)可以說(shuō)是最具潛力的市場(chǎng)之一，潛在目標(biāo)行業(yè)包括手機(jī)、XR、物聯(lián)網(wǎng)、機(jī)器人，以及電動(dòng)汽車領(lǐng)域等，均顯示出了巨大的市場(chǎng)潛力，預(yù)計(jì)未來(lái)這些市場(chǎng)還會(huì)持續(xù)快速發(fā)展。據(jù)他介紹Prophesee已經(jīng)在上海成立辦事處，使得公司在中國(guó)有了本地團(tuán)隊(duì)支持，此外他還計(jì)劃在香港開設(shè)辦事處。

“除此之外，我們還在和一些中國(guó)投資者進(jìn)行接洽，準(zhǔn)備開展新一輪融資工作?！盠uca Verre說(shuō)。

關(guān)鍵詞：