澳洲業(yè)者BrainChip宣布采用其棘波神經(jīng)處理器(spiking neural processor)技術(shù)，開(kāi)發(fā)了自主性視覺(jué)特征提取(Autonomous Visual Feature Extraction，AVFE)系統(tǒng)。
BrainChip的神經(jīng)網(wǎng)路處理器被稱(chēng)為SNAP，采用訊號(hào)棘波來(lái)傳輸資料，以及一種叫做棘波時(shí)機(jī)相關(guān)可塑性(Spike Time Dependent Plasticity，STDP)的學(xué)習(xí)方法。AVFE是一項(xiàng)突破，證明能從視覺(jué)資料流進(jìn)行無(wú)人監(jiān)督的學(xué)習(xí)，可應(yīng)用于諸如自動(dòng)駕駛車(chē)輛與無(wú)人機(jī)的防碰撞功能。
根據(jù)BrainChip所提供的資料，SNAP上的AVFE每秒能處理100萬(wàn)個(gè)視覺(jué)事件，而且能在幾秒鐘學(xué)習(xí)并辨別資料流中的圖形；SNAP/AVFE是以該公司向瑞士開(kāi)發(fā)商Inilabs采購(gòu)的Davis 動(dòng)態(tài)視覺(jué)感測(cè)器(Dynamic Vision Sensor)，做為串流數(shù)位視訊資料的來(lái)源。
Davis 動(dòng)態(tài)視覺(jué)感測(cè)器是一種人工視網(wǎng)膜，擁有與SNAP相同的位置事件表現(xiàn)(Address Event Representation，AER)介面；并非將視訊訊框輸出，每個(gè)畫(huà)素只要在對(duì)比(contrast)變化時(shí)就會(huì)輸出一個(gè)或更多棘波。
AVFE 系統(tǒng)架構(gòu)
執(zhí)行于SNAP上并連結(jié)至一個(gè)恰當(dāng)視訊來(lái)源的AVFE潛在應(yīng)用，包括車(chē)輛以及無(wú)人機(jī)內(nèi)的防碰撞系統(tǒng)、異常狀況檢測(cè)、保全與醫(yī)療成像等等。
該系統(tǒng)最初對(duì)于輸入資料流內(nèi)容并無(wú)所知，會(huì)藉由重復(fù)性與強(qiáng)度自主學(xué)習(xí)，并開(kāi)始找到影像串流內(nèi)的圖形；影像串流可以是由視覺(jué)影像感測(cè)器(如Davis人工視網(wǎng)膜)所產(chǎn)生，或是經(jīng)過(guò)恰當(dāng)設(shè)計(jì)的雷達(dá)或超音波來(lái)源設(shè)備。
AVFE已經(jīng)在美國(guó)加州帕沙迪那(Pasadena)的高速公路上進(jìn)行過(guò)測(cè)試，持續(xù)運(yùn)作了78.5秒，SNAP棘波神經(jīng)網(wǎng)路學(xué)習(xí)辨別車(chē)輛并開(kāi)始即時(shí)計(jì)算其數(shù)量。
以Inilabs的Davis視網(wǎng)膜晶片擷取的視覺(jué)影像，顯示在高速公路上移動(dòng)的車(chē)流
BrainChip執(zhí)行長(zhǎng)、SNAP神經(jīng)處理器的發(fā)明人Peter van der Made表示：“我們對(duì)于此大幅度進(jìn)展感到非常興奮，展現(xiàn)了BrainChips的神經(jīng)處理器SNAP能在無(wú)人類(lèi)監(jiān)督的情況下，從視覺(jué)饋入擷取資訊并學(xué)習(xí)?！?/p>