當(dāng)前位置:廣州虹科電子科技有限公司>>技術(shù)文章>>友思特產(chǎn)品 | 新型基于神經(jīng)擬態(tài)的事件相機(jī)
友思特產(chǎn)品 | 新型基于神經(jīng)擬態(tài)的事件相機(jī)
導(dǎo)讀
在機(jī)器視覺(jué)領(lǐng)域,技術(shù)的每一次突破都為工業(yè)自動(dòng)化、智能監(jiān)控等諸多行業(yè)帶來(lái)新的活力與可能。本文將深入剖析iDS事件相機(jī)的技術(shù)原理、核心優(yōu)勢(shì)以及應(yīng)用案例,展現(xiàn)其如何在各領(lǐng)域大放異彩。
一、技術(shù)原理:事件驅(qū)動(dòng)的動(dòng)態(tài)視覺(jué)感知
與傳統(tǒng)基于幀掃描的工業(yè)相機(jī)不同,iDS 事件相機(jī)采用基于事件的視覺(jué)傳感器(EVS)。傳統(tǒng)工業(yè)相機(jī)持續(xù)輸出固定幀率的完整圖像,即便場(chǎng)景靜止也會(huì)產(chǎn)生冗余數(shù)據(jù)。而 iDS 事件相機(jī)只捕捉每個(gè)傳感器像素的對(duì)比度變化,每個(gè)變化生成獨(dú)立事件信號(hào)實(shí)時(shí)傳輸,消除靜態(tài)背景數(shù)據(jù)。類似于人眼觀察時(shí),只會(huì)重點(diǎn)關(guān)注移動(dòng)的物體(如飛馳的汽車),而忽略靜止的背景(如路邊的樹(shù)木),iDS 相機(jī)的每個(gè)像素都是獨(dú)立的‘感知單元’,僅在亮度發(fā)生變化時(shí)產(chǎn)生信號(hào)。這種機(jī)制意味著它能以非常高的時(shí)間分辨率(百微秒級(jí))捕捉移動(dòng)物體的軌跡,數(shù)據(jù)負(fù)荷較傳統(tǒng)圖像傳感器降低10-1000倍。

視頻1. 幀相機(jī)VS事件相機(jī)
該技術(shù)的核心是對(duì)生物視覺(jué)的仿生創(chuàng)新,就像人眼優(yōu)先關(guān)注場(chǎng)景中的動(dòng)態(tài)信息一樣,事件相機(jī)聚焦于捕捉場(chǎng)景變化,從而實(shí)現(xiàn)了高效的數(shù)據(jù)采集與傳輸。例如,當(dāng)物體在靜止環(huán)境中移動(dòng)時(shí),事件相機(jī)能夠精準(zhǔn)捕捉物體運(yùn)動(dòng)的軌跡,而無(wú)需對(duì)整個(gè)場(chǎng)景進(jìn)行高頻次全面掃描。這種選擇性感知機(jī)制不僅大幅提升有效信息密度,更實(shí)現(xiàn)了真正意義上的高效能視覺(jué)處理。

圖1. 人眼神經(jīng)擬態(tài)技術(shù)
二、核心優(yōu)勢(shì):速度、精度與能效的提升
1.超高速動(dòng)態(tài)捕捉能力
配備1280×720異步智能像素,iDS事件相機(jī)時(shí)間分辨率達(dá)百微秒級(jí),等效10,000 fps成像能力,能夠捕捉極快的動(dòng)作而不會(huì)出現(xiàn)運(yùn)動(dòng)模糊,消除了圖像間的 “盲點(diǎn)"。在高速工業(yè)生產(chǎn)線上,如電子元件制造、制藥行業(yè)藥丸生產(chǎn)等場(chǎng)景,這種超高速動(dòng)態(tài)捕捉能力至關(guān)重要。它可以精確地對(duì)高速移動(dòng)的物體進(jìn)行計(jì)數(shù)、定位和測(cè)量,顯著提升產(chǎn)線質(zhì)量控制效率。

圖2. IMX636傳感器芯片
2.高動(dòng)態(tài)范圍與出色的光照適應(yīng)性
事件相機(jī)擁有 120dB 的高動(dòng)態(tài)范圍和 40mlux 的高感光靈敏度,無(wú)需曝光時(shí)間就能無(wú)模糊捕捉動(dòng)態(tài)場(chǎng)景,且無(wú)論是明亮的環(huán)境還是近乎無(wú)光的黑暗場(chǎng)景,都能清晰成像。突破傳統(tǒng)相機(jī)因光照波動(dòng)導(dǎo)致的圖像失真、成像質(zhì)量變差的瓶頸,保證穩(wěn)定的視覺(jué)數(shù)據(jù)輸出。
3.高效能優(yōu)勢(shì):低數(shù)據(jù)量 + 低功耗 + 快響應(yīng)
基于神經(jīng)擬態(tài)視覺(jué)技術(shù),iDS 事件相機(jī)極大地降低了系統(tǒng)的能源消耗和計(jì)算能力要求,平均能耗控制在 mW 范圍內(nèi),尤其適配無(wú)人機(jī)、移動(dòng)機(jī)器人等嵌入式設(shè)備。iDS 事件相機(jī)在維持長(zhǎng)續(xù)航的同時(shí)規(guī)避散熱風(fēng)險(xiǎn),提高設(shè)備的可靠性和穩(wěn)定性。
由于只捕捉動(dòng)態(tài)變化,忽略靜態(tài)區(qū)域,iDS 事件相機(jī)相比傳統(tǒng)圖像相機(jī)大幅減少了需處理的數(shù)據(jù)量。這不僅節(jié)省了內(nèi)存存儲(chǔ)空間,還縮短了數(shù)據(jù)處理時(shí)間,使得系統(tǒng)能夠更快地做出響應(yīng)。在實(shí)時(shí)性要求較高的應(yīng)用中,如工業(yè)自動(dòng)化中的快速分揀系統(tǒng)、智能交通中的車輛識(shí)別與監(jiān)測(cè)等,這種高效的數(shù)據(jù)處理能力能夠顯著提高系統(tǒng)的性能和效率。
三、應(yīng)用場(chǎng)景:工業(yè)智能化的創(chuàng)新引擎
1.機(jī)械振動(dòng)監(jiān)測(cè):預(yù)測(cè)性維護(hù)的得力助手
對(duì)于工業(yè)設(shè)備的振動(dòng)監(jiān)測(cè),iDS 事件相機(jī)展現(xiàn)出了獨(dú)特的優(yōu)勢(shì)。以大型風(fēng)機(jī)制造為例,風(fēng)機(jī)在運(yùn)行過(guò)程中,軸承的早期故障診斷一直是個(gè)難題,傳統(tǒng)設(shè)備因采樣率不足易漏檢高頻振動(dòng)信號(hào)。iDS 事件相機(jī)通過(guò)像素級(jí)追蹤,記錄軸承振動(dòng)的坐標(biāo)、極性和時(shí)間戳,連續(xù)監(jiān)控振動(dòng)頻率并實(shí)時(shí)分析振動(dòng)模式??梢杂行Р蹲捷S承早期的異常振動(dòng)信號(hào),為企業(yè)提前安排維修提供了準(zhǔn)確依據(jù),設(shè)備的可靠性和運(yùn)行效率得到了顯著提升。

視頻2. 機(jī)械振動(dòng)監(jiān)測(cè)應(yīng)用
2.工業(yè)生產(chǎn):質(zhì)量管控的精準(zhǔn)利器
在制造業(yè)的生產(chǎn)線上,iDS 事件相機(jī)發(fā)揮著關(guān)鍵作用。例如在電子元件制造領(lǐng)域,電子廠需要對(duì)高速傳送帶上的芯片進(jìn)行精準(zhǔn)計(jì)數(shù)和外觀檢測(cè)。傳統(tǒng)相機(jī)因幀率限制和數(shù)據(jù)處理延遲,難以滿足生產(chǎn)線的高速需求,導(dǎo)致部分芯片計(jì)數(shù)誤差較大。而 iDS 事件相機(jī)憑借其超高速動(dòng)態(tài)捕捉能力,以每秒 10,000 幀的高速成像,精準(zhǔn)地對(duì)芯片進(jìn)行計(jì)數(shù),誤差率降低至幾乎為零,極大地提升了生產(chǎn)效率。
在制藥行業(yè),藥丸的生產(chǎn)對(duì)計(jì)數(shù)和尺寸測(cè)量要求較高,速度節(jié)拍要求非常高,并且藥丸本身運(yùn)動(dòng)速度快,傳統(tǒng)的高速可見(jiàn)光相機(jī)價(jià)格高昂,因?yàn)楦咚傧鄼C(jī)是基于幀的技術(shù)成像原理,成像時(shí)數(shù)據(jù)量龐大,傳輸帶寬壓力大。在這個(gè)背景下引入事件相機(jī)有效解決了傳統(tǒng)基于幀的相機(jī)技術(shù)采集圖像的弊端。事件相機(jī)在藥丸高速移動(dòng)的過(guò)程中,準(zhǔn)確地測(cè)量藥丸的尺寸,尺寸測(cè)量精度達(dá)到了微米級(jí)別,并且能夠?qū)崟r(shí)統(tǒng)計(jì)藥丸數(shù)量,計(jì)數(shù)精度高達(dá) 99.99%,有效確保了藥品包裝的準(zhǔn)確性和質(zhì)量穩(wěn)定性。

視頻3. 藥粒高速計(jì)數(shù)應(yīng)用
3.流體動(dòng)力學(xué)監(jiān)測(cè):工藝優(yōu)化的實(shí)時(shí)保障
在食品飲料生產(chǎn)、石油天然氣運(yùn)輸、生物工藝制造等行業(yè)中,需要對(duì)連續(xù)液體流量進(jìn)行實(shí)時(shí)監(jiān)測(cè),以及時(shí)發(fā)現(xiàn)由于殘留物積聚、斑點(diǎn)污染物或不需要的空氣或氣泡等引起的流體動(dòng)力學(xué)異常,如確保液體灌裝的準(zhǔn)確性和穩(wěn)定性、監(jiān)測(cè)油流的狀態(tài)以防止泄漏和堵塞。傳統(tǒng)監(jiān)測(cè)方法往往依賴于化學(xué)分析,響應(yīng)速度慢,無(wú)法滿足實(shí)時(shí)生產(chǎn)監(jiān)控的需求?;谑录墓饬骷夹g(shù)能夠?qū)崟r(shí)執(zhí)行流體監(jiān)測(cè),通過(guò)分析液體流動(dòng)過(guò)程中光照變化事件,提供關(guān)于流體健康和行為的實(shí)時(shí)反饋。該方法無(wú)需等待化學(xué)分析,即可快速發(fā)現(xiàn)影響產(chǎn)量的工藝中斷。

視頻4. 流體動(dòng)力學(xué)監(jiān)測(cè)應(yīng)用
4.運(yùn)動(dòng)監(jiān)測(cè)與邊緣跟蹤:拓展應(yīng)用的廣闊前景
在增強(qiáng)現(xiàn)實(shí)應(yīng)用中,準(zhǔn)確的相機(jī)運(yùn)動(dòng)追蹤是關(guān)鍵。EDGELET 跟蹤能夠?yàn)樵鰪?qiáng)現(xiàn)實(shí)系統(tǒng)提供精確的相機(jī)位姿估計(jì),使虛擬元素能夠更加逼真地與現(xiàn)實(shí)場(chǎng)景融合。例如在一些工業(yè)維修場(chǎng)景中,維修人員佩戴增強(qiáng)現(xiàn)實(shí)眼鏡,通過(guò)攝像頭獲取設(shè)備圖像,系統(tǒng)利用 EDGELET 跟蹤實(shí)時(shí)計(jì)算相機(jī)位置和姿態(tài),將虛擬的維修指南、零件信息等準(zhǔn)確地疊加在現(xiàn)實(shí)設(shè)備上,輔助維修人員快速準(zhǔn)確地完成維修任務(wù)。在該應(yīng)用領(lǐng)域中,iDS 事件相機(jī)的高時(shí)間分辨率和邊緣跟蹤能力得到了充分展現(xiàn)。在為復(fù)雜物體建模時(shí),傳統(tǒng)的邊緣跟蹤方法受光線變化影響大,并且通常相機(jī)會(huì)快速運(yùn)動(dòng),跟蹤精度不穩(wěn)定。
引入 iDS 事件相機(jī)后,它能夠精確捕捉物體邊緣的變化事件,在不同的光照條件下,都能穩(wěn)定、準(zhǔn)確地跟蹤物體邊緣輪廓。在工業(yè)檢測(cè)中,對(duì)物體的邊緣位置和形狀變化進(jìn)行實(shí)時(shí)跟蹤,實(shí)現(xiàn)了對(duì)物體的精確測(cè)量和定位,為質(zhì)量控制提供了有力保障。

視頻5. 運(yùn)動(dòng)監(jiān)測(cè)與邊緣跟蹤應(yīng)用
四、展望未來(lái):開(kāi)啟機(jī)器視覺(jué)新篇章
事件相機(jī)以其獨(dú)特的技術(shù)原理、核心優(yōu)勢(shì)和廣泛的應(yīng)用場(chǎng)景,正在為機(jī)器視覺(jué)領(lǐng)域帶來(lái)變革。從工業(yè)生產(chǎn)到科研探索,從質(zhì)量控制到工藝優(yōu)化,事件相機(jī)都展現(xiàn)出了巨大的潛力和價(jià)值。隨著技術(shù)的不斷發(fā)展和應(yīng)用場(chǎng)景的不斷拓展,事件相機(jī)必將在更多的領(lǐng)域發(fā)揮重要作用,推動(dòng)各行業(yè)的智能化升級(jí)和發(fā)展。讓我們共同期待這一創(chuàng)新技術(shù)在未來(lái)帶來(lái)的更多精彩應(yīng)用和成果。
友思特科技一直致力于為客戶提供進(jìn)的機(jī)器視覺(jué)技術(shù)和解決方案。友思特可以為客戶提供通過(guò)定制化方案設(shè)計(jì)與技術(shù)驗(yàn)證服務(wù),確??蛻裟軌虺浞掷?iDS 事件相機(jī)的優(yōu)勢(shì),加速該技術(shù)在智能制造、能源監(jiān)測(cè)等領(lǐng)域的深度滲透,持續(xù)釋放機(jī)器視覺(jué)的范式革新價(jià)值。



7