來源:唐唐看科技
界面新聞記者 | 彭新
這是Luca Verre今年第二次到訪中國,他來參加在中國上海舉辦的世界移動通信大會。他在專訪中告訴界面新聞,除了MWC,他這次來中國的行程計劃還包括與上海團隊的項目跟進、與投資人交流等事宜。
Luca Verre是傳感器公司Prophesee的首席執行官,也是這家法國巴黎誕生的初創公司的聯合創始人,在一眾半導體創業企業中,Prophesee所涉足的視覺傳感器,仍是一個外界了解較少的小眾賽道,但憑借自身開創的獨特技術——“基于事件的傳感器”,有望創造新的應用領域。
(資料圖片僅供參考)
所謂基于事件的傳感器(EVS),其起源于視覺神經的信號模擬,是一種模仿眼睛的感光機制而建立的仿生傳感器技術:人眼感受到光線后,視網膜上的受體細胞就會將光信號轉換成神經信息,后段的神經細胞再分別挑選出亮部和暗部,經由神經節細胞,將信息傳遞到大腦的視覺皮層。
EVS則如同人類視覺神經,射入傳感器的光線會轉換成電氣信號。電氣信號通過放大器,由比較器根據亮度變化進行分離,形成變亮信號和變暗信號,然后再通過后段的信號處理,以EVS圖像數據的形式輸出。因此,EVS是一種只對亮度變化敏感并輸出圖像的視覺傳感器。
Luca Verre介紹,事件視覺技術的優勢在于捕獲動態信息、時間信息,這些信息可以很好地和CMOS RGB 傳感器的信息實現互補,或是和ToF 或者激光雷達收集的3D 信息互補。這種傳感器模式的組合可以形成更具價值的解決方案。
在EVS的制造上,主要是在索尼幫助下完成的,生產出的EVS傳感器成品提供給客戶,目前在索尼半導體部門的官網上,已經有兩款EVS傳感器對外提供。根據Prophesee介紹,借助索尼生產圖形傳感器的經驗,使得EVS傳感器得以大規模量產,實現優秀的拍攝性能并降低成本。
實際上,EVS作為一類新型傳感器,更重要的是為其尋找落地場景,據索尼半導體部門的相關研發人員介紹,早期“最大的難題是向客戶介紹EVS后,一開始大家都對這款獨特的傳感器產生了濃厚興趣,覺得很有趣,但是一旦討論到它的應用,客戶往往不知道要如何使用,因此始終難以進入下一個階段。”
這也是Luca Verre時常需要思考的問題。
傳感器細分賽道專業且龐雜,距大眾生活看似較遠,但其所應用的一些領域卻也和平常人的生活息息相關,如作為手機、汽車等設備“眼睛”攝像頭,內藏的圖像傳感器是核心部件,過去主要以傳統CMOS傳感器(CIS)為主。根據市場調研公司Counterpoint數據,2022年CIS全球單位出貨市場規模為190億美元。其中,移動手機占據的份額最高,為132億美元。
給手機裝上不一樣的“眼睛”,是Prophesee力圖在消費市場達到的成績,并選擇了一個手機攝像的常用功能“去模糊(deblur)”作為切入點,其基本原理是EVS傳感器配合傳統傳感器的數據,系統能夠將EVS以微秒為單位記錄的事件填充到兩幀圖像的間隙,通過算法提取純動態信息,從而修復運動模糊。從Prophesee向界面新聞提供的Demo來看,這一功能令人印象深刻。
與高通的合作也將為EVS進入手機市場降低難度,“我們和高通以及其他一些手機OEM廠商合作,將我們的傳感器和常規RGB 傳感器結合,用于提升手機攝影的圖像質量,用于圖像去模糊。”Luca Verre稱。
EVS傳感器以及Prophesee的去模糊算法,與高通的驍龍手機平臺整合后,有利于進一步打開市場,“我們跟高通的合作非常具有戰略意義。高通是高端旗艦手機應用處理器的市場領導者,我們和高通合作,把Prophesee Metavision傳感器和高通驍龍SoC結合,提高手機影像質量,我們也一起向一些手機OEM廠商推廣我們的解決方案。”Luca Verre稱,強調與高通的合作時一次“長期合作”,并暗示搭載EVS的手機將會很快推出。
除了手機,VR/AR頭顯也是Luca Verre一直密切關注的產品。北京時間6月6日凌晨,蘋果推出第一款XR(混合現實)頭戴顯示設備Apple Vision Pro和操作系統VisionOS,將在2024年早些時候登陸美國市場,隨后擴展至其他國家。Vision Pro內外部生態結合,通過虛擬鍵盤、眼球追蹤、手勢控制等新型交互方式落地辦公、娛樂等場景,無疑對于傳感器的要求也會有不少。
蘋果Vision Pro頭顯引發了對XR話題的廣泛關注,尤其是在眼球追蹤和手勢識別上取得了很好的效果,這被認為是所謂“空間計算”的關鍵交互技術。
手機和XR都是Prophesee在消費級市場布局的一部分,“有很多XR廠商對我們的事件視覺技術顯示出了濃厚興趣,目前我們也有和一些客戶在積極探討和評估相關的應用場景,”Luca Verre稱,蘋果的示范效應帶來的外界對XR產品的好奇心,也為后來者“打樣”,從Prophesee與XR廠商的討論來看,眼球追蹤(eye tracking)、手部追蹤或手勢控制以及實時定位與地圖構建( SLAM) 將是EVS傳感器在XR領域發揮用途。
在產品和資本關系上,Prophesee與中國聯系緊密,為進一步增強在相關市場的競爭力,Prophesee在2021年7月完成了一筆五千萬歐元的C輪融資,投資方包括中國的創新工場、惠友資本、小米及上海韋豪創芯等。
Luca Verre稱,中國對Prophesee來說可以說是最具潛力的市場之一,潛在目標行業包括手機、XR、物聯網、機器人,以及電動汽車領域等,均顯示出了巨大的市場潛力,預計未來這些市場還會持續快速發展。據他介紹Prophesee已經在上海成立辦事處,使得公司在中國有了本地團隊支持,此外他還計劃在香港開設辦事處。
“除此之外,我們還在和一些中國投資者進行接洽,準備開展新一輪融資工作。”Luca Verre說。
關鍵詞:
關于我們 加入我們 聯系我們 商務合作 粵ICP備2022077823號
創氪網 m.hbftgdzb.com 版權所有 技術支持:廣州中創互聯網信息服務有限公司
投稿投訴聯系郵箱:317 493 128 @qq.com