我國科學(xué)家研制出世界首款類腦互補(bǔ)視覺芯片“天眸芯”
【ZiDongHua 之創(chuàng)新自科文收錄關(guān)鍵詞:清華大學(xué) 類腦計(jì)算 自動(dòng)駕駛 無人系統(tǒng) 精密儀器 天眸芯 】
最新突破!我國科學(xué)家研制出世界首款類腦互補(bǔ)視覺芯片“天眸芯”
近日,清華大學(xué)精密儀器系類腦計(jì)算研究中心團(tuán)隊(duì)研制出了世界首款類腦互補(bǔ)視覺芯片“天眸芯”,基于該研究成果的論文《面向開放世界感知具有互補(bǔ)通路的視覺芯片》作為封面文章,登上5月30日的《自然》(Nature)雜志,標(biāo)志著我國在類腦計(jì)算和類腦感知方向上取得突破。
圖片2024年5月30日Nature 雜志封面
據(jù)悉,該芯片可在極低的帶寬和功耗代價(jià)下,實(shí)現(xiàn)每秒10000幀的高速、10bit的高精度、130dB的高動(dòng)態(tài)范圍的視覺信息采集,不僅為智能革命的發(fā)展提供了強(qiáng)大技術(shù)支持,還為自動(dòng)駕駛、具身智能等重要應(yīng)用開辟了新的道路。
視覺感知,作為智能無人系統(tǒng)獲取信息的核心途徑發(fā)揮著至關(guān)重要的作用。但在面對(duì)駕駛中的突發(fā)危險(xiǎn)、隧道口的劇烈光線變化和夜間強(qiáng)閃光干擾等極端場(chǎng)景時(shí),傳統(tǒng)視覺感知芯片由于受到“功耗墻”“帶寬墻”的限制,往往出現(xiàn)失真、失效或高延遲的問題,嚴(yán)重影響了系統(tǒng)的穩(wěn)定性和安全性。
為更好應(yīng)對(duì)上述問題,精儀系類腦計(jì)算研究團(tuán)隊(duì)聚焦類腦視覺感知芯片技術(shù),提出了一種基于視覺原語的互補(bǔ)雙通路類腦視覺感知新范式。論文通訊作者、清華大學(xué)精密儀器系教授施路平介紹:“該范式借鑒了人類視覺系統(tǒng)的基本原理,將開放世界的視覺信息拆解為基于視覺原語的信息表示,并通過有機(jī)組合這些原語,模仿人視覺系統(tǒng)的特征,形成兩條優(yōu)勢(shì)互補(bǔ)、信息完備的視覺感知通路。”
同時(shí),基于“天眸芯”,團(tuán)隊(duì)還自主研發(fā)了高性能軟件和算法,并在開放環(huán)境車載平臺(tái)上進(jìn)行了性能驗(yàn)證。在多種極端場(chǎng)景下,該系統(tǒng)實(shí)現(xiàn)了低延遲、高性能的實(shí)時(shí)感知推理,展現(xiàn)了其在智能無人系統(tǒng)領(lǐng)域的巨大應(yīng)用潛力。
咨詢?cè)斍椋?/strong>如需咨詢文中涉及的相關(guān)產(chǎn)品或解決方案詳情,請(qǐng)加微信:ZiDongHuaX 。
微信聯(lián)盟:類腦計(jì)算微信群、自動(dòng)駕駛微信群、無人系統(tǒng)微信群、精密儀器微信群、天眸芯微信群,各細(xì)分行業(yè)微信群:點(diǎn)擊這里進(jìn)入。
鴻達(dá)安視:水文水利在線監(jiān)測(cè)儀器、智慧農(nóng)業(yè)在線監(jiān)測(cè)儀器 金葉儀器: 氣體/顆粒物/煙塵在線監(jiān)測(cè)解決方案
西凱昂:SMC氣動(dòng)元件、力士樂液壓元件、倍加福光電產(chǎn)品等 山東諾方: 顆粒物傳感器、粉塵濃度傳感器
深圳金瑞銘:RFID射頻識(shí)別、智能傳感器等物聯(lián)網(wǎng)解決方案 北京英諾艾智: 容錯(cuò)服務(wù)器、邊緣計(jì)算解決方案
微信聯(lián)盟:類腦計(jì)算微信群、自動(dòng)駕駛微信群、無人系統(tǒng)微信群、精密儀器微信群、天眸芯微信群,各細(xì)分行業(yè)微信群:點(diǎn)擊這里進(jìn)入。
鴻達(dá)安視:水文水利在線監(jiān)測(cè)儀器、智慧農(nóng)業(yè)在線監(jiān)測(cè)儀器 金葉儀器: 氣體/顆粒物/煙塵在線監(jiān)測(cè)解決方案
西凱昂:SMC氣動(dòng)元件、力士樂液壓元件、倍加福光電產(chǎn)品等 山東諾方: 顆粒物傳感器、粉塵濃度傳感器
深圳金瑞銘:RFID射頻識(shí)別、智能傳感器等物聯(lián)網(wǎng)解決方案 北京英諾艾智: 容錯(cuò)服務(wù)器、邊緣計(jì)算解決方案
我要收藏
個(gè)贊
評(píng)論排行