近日,領(lǐng)先的融合視覺傳感器發(fā)明者銳思智芯宣布推出一款全新基于事件的視覺傳感器ALPIX-Maloja?,搭載全新的IN-PULSE DiADC架構(gòu),在擁有純事件相機低功耗、低延時、低算力消耗、隱私保護等特性的同時,在同類產(chǎn)品中最具性價比優(yōu)勢,廣泛適用于智慧家電、AON感知、智能硬件、實時看護等端側(cè)視覺人工智能領(lǐng)域,為快速增長的海量邊緣智能市場提供高可靠、卓越性價比的視覺底層器件與多模態(tài)視覺感知技術(shù)支持。
ALPIX Maloja? 是銳思智芯推出的一款事件感知 (sensing)傳感器,適配AI智能終端帶來的 AON 端側(cè)超低功耗、超低算力及隱私保護等需求。它延續(xù)了核心團隊在事件相機和早期仿生視覺芯片領(lǐng)域長達十年的工作積累,借鑒公司成立以來多款融合視覺傳感器的開發(fā)經(jīng)驗,其高幀率(1000fps)、寬動態(tài)范圍(120dB)、低功耗(<4mW @ 1000 FPS)特性,以滿足端側(cè)智算市場的極致需求。其分辨率為256 × 256,像素尺寸為20 μm × 20 μm,光學(xué)格式1/4”,不僅能充分滿足功耗、算力和尺寸受到限制的邊緣視覺系統(tǒng)在復(fù)雜光照環(huán)境中的高速視覺需求,還能進一步降低成本,以適應(yīng)不同客戶多元化的產(chǎn)品需求組合。
關(guān)鍵優(yōu)勢:
1. 具備純事件相機的基礎(chǔ)優(yōu)點:
a) 超低工作功耗:< 4 mW @ 1000fps,支持始終在線(AON)的端側(cè)應(yīng)用,集成芯片內(nèi)變化感知模式。
b)低照度下,仍舊保持靈敏,低延時的運動和人形檢測。
c) 無懼復(fù)雜光線環(huán)境,高速輸出運動特征。
d) 原生隱私保護:僅輸出高頻運動信息,不采集細節(jié)和背景信息。
e) 低冗余數(shù)據(jù)量,算力友好:冗余數(shù)據(jù)量僅為同規(guī)格傳統(tǒng)圖像傳感器的10-20%??芍С殖R姷凸腗CU如ESP32S3,搭載NPU模塊的STM32N6,RV1106等系列,幫助降低系統(tǒng)算力成本。
2. 采用全新IN-PULSE DiADC架構(gòu),提升芯片性能、降低功耗的同時,同類產(chǎn)品中極具性價比:“我們采用了 IN-PULSE DiADC 架構(gòu),將感、存、算三個機制集成在一個像素單元內(nèi),在單個像素內(nèi)完成獨立的光強變化感知及本地模數(shù)轉(zhuǎn)換與信號處理,像素直接輸出變化的特征信息,令結(jié)構(gòu)更加緊湊,滿足小型化、低功耗需求。同時,這一設(shè)計縮短信號傳輸路徑,降低外部噪聲影響,提升傳感器穩(wěn)定性。最后,本地化的存算一體結(jié)構(gòu)減少了總線數(shù)據(jù)傳輸負載和功耗,對嵌入式設(shè)備等功耗敏感的場景非常友好“,銳思智芯蘇黎世技術(shù)總監(jiān) Roger Bostock 博士介紹?!按送?,較大的像素擁有更大感光面積,不僅能維持高量子效率(QE)以提高信噪比,提升像素靈敏度以捕捉微小的光強變化,還能降低寄生光效應(yīng)帶來的像素間串?dāng)_,降低讀出噪聲和暗電流,減少了對復(fù)雜降噪算法的依賴,簡化了設(shè)計并增添了靈活性?!?br/>
典型用例
ALPIX-Maloja? 可直接適配端側(cè)傳統(tǒng)感知、檢測與特征識別算法框架,也可選擇搭載銳思提供的各類型針對事件數(shù)據(jù)特性進行優(yōu)化的算法模塊。
1. 消費電子設(shè)備,如AI-PC、平板電腦、游戲機、智慧大屏、智能學(xué)習(xí)機等,實現(xiàn)手勢識別、位姿檢測,實現(xiàn)更流暢的人機交互。
2. 康養(yǎng)看護設(shè)備:摔倒檢測攝像頭、位姿檢測攝像頭、感統(tǒng)訓(xùn)練攝像頭,可用于家庭、醫(yī)療機構(gòu)、特殊教育機構(gòu),提供低侵入、高隱私保護的實時方案。
3. 智慧家電,如電視、空調(diào)、電風(fēng)扇、洗衣機、智慧床架、智能晾衣架、智能馬桶蓋、智慧車庫門等,實現(xiàn)存在感知、家電無觸控制、手勢識別等,實時感知用戶行為,提供低侵入、高隱私、低功耗的差異化方案。
4. 智能硬件,如寵物攝像頭、寵物喂食器、寵物廁所、觀鳥器、動保喂食器、掃地機器人等,提供低功耗、高感度、輕量級的存在感知和運動檢測方案。
5. 智慧商業(yè)與智慧交通:輕量級、非侵入、隱私保護的商場人數(shù)統(tǒng)計、公交車人數(shù)統(tǒng)計。
6. AON感知:提供超低功耗、始終在線的超低功耗始終在線端側(cè)監(jiān)測系統(tǒng)