獨創融合仿生視覺技術,「銳思智芯」釋出全球首款融合事件相機ALPIX-Pilatus

獨創融合仿生視覺技術,「銳思智芯」釋出全球首款融合事件相機ALPIX-Pilatus

10月27日,

耀途早期投資專案銳思智芯釋出業內首款融合仿生事件視覺感測器晶片——ALPIX-Pilatus

(簡稱ALPIX-P),該產品專為機器感知設計的感測器,可廣泛應用於機器人、智慧手機、無人駕駛、無人機、安防等場景。

2021年7月,耀途資本、海康威視聯合領投

北京銳思智芯科技有限公司近億元Pre-A輪融資

獨創融合仿生視覺技術,「銳思智芯」釋出全球首款融合事件相機ALPIX-Pilatus

銳思智芯 ALPIX -Pilatus 融合仿生視覺感測器晶片

據瞭解,ALPIX-P採用銳思智芯自主研發的Hybrid Vision融合式仿生事件視覺感測技術,即將仿生事件視覺技術與傳統影象感測技術在畫素級別進行融合。晶片可以在傳統影象感測器模式和仿生事件相機模式之間快速切換,實現事件相機與CIS相機功能“二合一”。

在影象模式下,ALPIX-P是一款最高幀率為120幀的全域性曝光感測器,與現有的傳統影象感測器完全一致,與現有成熟的視覺系統完全相容。在仿生事件相機模式下,ALPIX-P具有超高幀率,高有效資訊佔比,大動態範圍的特點。

獨創融合仿生視覺技術,「銳思智芯」釋出全球首款融合事件相機ALPIX-Pilatus

晶片工作原理

“Hybrid Vision”技術是基於團隊在各類高階視覺感測器和仿生事件感測器10年的產業積累,應用了最前沿的視覺系統的設計理念和技巧,研發而成。

基於此技術的ALPIX系列晶片既擁有事件相機的速度快、功耗低、資料量少、HDR的優點;也提供細節豐富的靜態影象資訊,可滿足計算機視覺對動、靜態探測的需求。因此非常適用用於給機器“看“。

仿生事件相機自2015年開始產業化探索以來受到來自學術及產業界重視。尤其近幾年,國際感測器巨頭公司,如三星、索尼都參與到事件相機的研發及推廣當中。最近,索尼更是釋出兩款事件相機晶片(EVS)。

而銳思智芯此次釋出的ALPIX-P,為目前全球首款融合式仿生事件相機方案晶片。

與早期的事件相機技術方案相比,這種融合方案的優點有三:

首先,相比於現有仿生事件相機在大部分場景需要配合一款傳統影象相機的雙攝像頭方案,ALPIX系列一顆晶片可代替兩顆晶片功能,不僅更具系統成本優勢,資料更加豐富。

其次,解決雙攝異源配準問題。在事件相機+傳統影象感測器的雙攝系統中,由於兩顆攝像頭視角的差別,需要對事件相機資料和影象資料進行實時的配準。而事件資料和影象資料是兩類完全不同的資料型別,空間配準難度大,對於底層的融合演算法實現帶來較大困難。而ALPIX系列由於其融合的兩類訊號是同一畫素生成的,天然的解決了空間配準難的問題。

最後,ALPIX可輸出影象訊號,可以相容現有影象處理演算法和架構。

除此之外,基於ALPIX-P的設計,之後的ALPIX晶片將採用3D堆疊技術及獨有的晶片底層設計,在畫素尺寸、解析度、成本、並且在噪聲及暗光環境下的效能等有更進一步的提升。

銳思智芯成立於2019年7月,是一家新型視覺感測器晶片提供商,曾獲海康、聯想、舜宇、科大訊飛、耀途資本、中科創星等投資。團隊來自劍橋大學、蘇黎世聯邦理工(ETH)、浙江大學等世界名校,有CSEM、NXP、ARM、飛思卡爾、Intel、Magic Leap等國際著名公司工作經驗。團隊核心成員擁有15年的影象感測器領域技術經驗,在北京、南京、深圳和瑞士均設有研發中心。