近日,領(lǐng)先的融合視覺(jué)傳感器發(fā)明者銳思智芯宣布推出一款全新基于事件的視覺(jué)傳感器ALPIX-Maloja?,搭載全新的IN-PULSE DiADC架構,在擁有純事件相機低功耗、低延時(shí)、低算力消耗、隱私保護等特性的同時(shí),在同類(lèi)產(chǎn)品中最具性?xún)r(jià)比優(yōu)勢,廣泛適用于智慧家電、AON感知、智能硬件、實(shí)時(shí)看護等端側視覺(jué)人工智能領(lǐng)域,為快速增長(cháng)的海量邊緣智能市場(chǎng)提供高可靠、卓越性?xún)r(jià)比的視覺(jué)底層器件與多模態(tài)視覺(jué)感知技術(shù)支持。
ALPIX Maloja? 是銳思智芯推出的一款事件感知 (sensing)傳感器,適配AI智能終端帶來(lái)的 AON 端側超低功耗、超低算力及隱私保護等需求。它延續了核心團隊在事件相機和早期仿生視覺(jué)芯片領(lǐng)域長(cháng)達十年的工作積累,借鑒公司成立以來(lái)多款融合視覺(jué)傳感器的開(kāi)發(fā)經(jīng)驗,其高幀率(1000fps)、寬動(dòng)態(tài)范圍(120dB)、低功耗(<4mW @ 1000 FPS)特性,以滿(mǎn)足端側智算市場(chǎng)的極致需求。其分辨率為256 × 256,像素尺寸為20 μm × 20 μm,光學(xué)格式1/4”,不僅能充分滿(mǎn)足功耗、算力和尺寸受到限制的邊緣視覺(jué)系統在復雜光照環(huán)境中的高速視覺(jué)需求,還能進(jìn)一步降低成本,以適應不同客戶(hù)多元化的產(chǎn)品需求組合。
關(guān)鍵優(yōu)勢:
1. 具備純事件相機的基礎優(yōu)點(diǎn):
a) 超低工作功耗:< 4 mW @ 1000fps,支持始終在線(xiàn)(AON)的端側應用,集成芯片內變化感知模式。
b)低照度下,仍舊保持靈敏,低延時(shí)的運動(dòng)和人形檢測。
c) 無(wú)懼復雜光線(xiàn)環(huán)境,高速輸出運動(dòng)特征。
d) 原生隱私保護:僅輸出高頻運動(dòng)信息,不采集細節和背景信息。
e) 低冗余數據量,算力友好:冗余數據量?jì)H為同規格傳統圖像傳感器的10-20%??芍С殖R?jiàn)低功耗MCU如ESP32S3,搭載NPU模塊的STM32N6,RV1106等系列,幫助降低系統算力成本。
2. 采用全新IN-PULSE DiADC架構,提升芯片性能、降低功耗的同時(shí),同類(lèi)產(chǎn)品中極具性?xún)r(jià)比:“我們采用了 IN-PULSE DiADC 架構,將感、存、算三個(gè)機制集成在一個(gè)像素單元內,在單個(gè)像素內完成獨立的光強變化感知及本地模數轉換與信號處理,像素直接輸出變化的特征信息,令結構更加緊湊,滿(mǎn)足小型化、低功耗需求。同時(shí),這一設計縮短信號傳輸路徑,降低外部噪聲影響,提升傳感器穩定性。最后,本地化的存算一體結構減少了總線(xiàn)數據傳輸負載和功耗,對嵌入式設備等功耗敏感的場(chǎng)景非常友好“,銳思智芯蘇黎世技術(shù)總監 Roger Bostock 博士介紹?!按送?,較大的像素擁有更大感光面積,不僅能維持高量子效率(QE)以提高信噪比,提升像素靈敏度以捕捉微小的光強變化,還能降低寄生光效應帶來(lái)的像素間串擾,降低讀出噪聲和暗電流,減少了對復雜降噪算法的依賴(lài),簡(jiǎn)化了設計并增添了靈活性?!?br/>
典型用例
ALPIX-Maloja? 可直接適配端側傳統感知、檢測與特征識別算法框架,也可選擇搭載銳思提供的各類(lèi)型針對事件數據特性進(jìn)行優(yōu)化的算法模塊。
1. 消費電子設備,如AI-PC、平板電腦、游戲機、智慧大屏、智能學(xué)習機等,實(shí)現手勢識別、位姿檢測,實(shí)現更流暢的人機交互。
2. 康養看護設備:摔倒檢測攝像頭、位姿檢測攝像頭、感統訓練攝像頭,可用于家庭、醫療機構、特殊教育機構,提供低侵入、高隱私保護的實(shí)時(shí)方案。
3. 智慧家電,如電視、空調、電風(fēng)扇、洗衣機、智慧床架、智能晾衣架、智能馬桶蓋、智慧車(chē)庫門(mén)等,實(shí)現存在感知、家電無(wú)觸控制、手勢識別等,實(shí)時(shí)感知用戶(hù)行為,提供低侵入、高隱私、低功耗的差異化方案。
4. 智能硬件,如寵物攝像頭、寵物喂食器、寵物廁所、觀(guān)鳥(niǎo)器、動(dòng)保喂食器、掃地機器人等,提供低功耗、高感度、輕量級的存在感知和運動(dòng)檢測方案。
5. 智慧商業(yè)與智慧交通:輕量級、非侵入、隱私保護的商場(chǎng)人數統計、公交車(chē)人數統計。
6. AON感知:提供超低功耗、始終在線(xiàn)的超低功耗始終在線(xiàn)端側監測系統