澳洲廠商BrainChip宣布采用其脈沖神經(jīng)處理器(spiking neural processor)技術(shù)，開發(fā)了自主性視覺特征提取(Autonomous Visual Feature Extraction，AVFE)系統(tǒng)。Kjresmc
BrainChip的神經(jīng)網(wǎng)絡(luò)處理器被稱為SNAP，采用信號(hào)脈沖來傳輸數(shù)據(jù)，以及一種叫做脈沖時(shí)機(jī)相關(guān)可塑性(Spike Time Dependent Plasticity，STDP)的學(xué)習(xí)方法。AVFE是一項(xiàng)突破，證明能從視覺數(shù)據(jù)流進(jìn)行無人監(jiān)督的學(xué)習(xí)，可應(yīng)用于諸如自動(dòng)駕駛車輛與無人機(jī)的防碰撞功能。Kjresmc
根據(jù)BrainChip所提供的資料，SNAP上的AVFE每秒能處理100萬個(gè)視覺事件，而且能在幾秒鐘學(xué)習(xí)并辨別資料流中的圖形；SNAP/AVFE是以該公司向瑞士開發(fā)商Inilabs采購的Davis動(dòng)態(tài)視覺傳感器(Dynamic Vision Sensor)，做為串流數(shù)字視頻數(shù)據(jù)的來源。Kjresmc
Davis 動(dòng)態(tài)視覺傳感器是一種人工視網(wǎng)膜，擁有與SNAP相同的位置事件表現(xiàn)(Address Event Representation，AER)接口；并非將視訊訊框輸出，每個(gè)畫素只要在對(duì)比(contrast)變化時(shí)就會(huì)輸出一個(gè)或更多脈沖。
AVFE 系統(tǒng)架構(gòu)Kjresmc
執(zhí)行于SNAP上并鏈接至一個(gè)恰當(dāng)視頻來源的AVFE潛在應(yīng)用，包括車輛以及無人機(jī)內(nèi)的防碰撞系統(tǒng)、異常狀況檢測(cè)、保全與醫(yī)療成像等等。Kjresmc
該系統(tǒng)最初對(duì)于輸入數(shù)據(jù)流內(nèi)容并無所知，會(huì)藉由重復(fù)性與強(qiáng)度自主學(xué)習(xí)，并開始找到影像串流內(nèi)的圖形；影像串流可以是由視覺影像傳感器(如Davis人工視網(wǎng)膜)所產(chǎn)生，或是經(jīng)過恰當(dāng)設(shè)計(jì)的雷達(dá)或超音波來源設(shè)備。Kjresmc
AVFE已經(jīng)在美國加州帕沙迪那(Pasadena)的高速公路上進(jìn)行過測(cè)試，持續(xù)運(yùn)作了78.5秒，SNAP脈沖神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)辨別車輛并開始實(shí)時(shí)計(jì)算其數(shù)量。Kjresmc
以Inilabs的Davis視網(wǎng)膜芯片擷取的視覺影像，顯示在高速公路上移動(dòng)的車流 (圖片來源：BrainChip)Kjresmc
BrainChip執(zhí)行長、SNAP神經(jīng)處理器的發(fā)明人Peter van der Made表示：“我們對(duì)于此大幅度進(jìn)展感到非常興奮，展現(xiàn)了BrainChips的神經(jīng)處理器SNAP能在無人類監(jiān)督的情況下，從視覺饋入擷取信息并學(xué)習(xí)?！?span style="display:none">Kjresmc
