人民日?qǐng)?bào)記者 龔仕建
“啪嗒啪嗒......”一只機(jī)器狗在街上邁著規(guī)律的步伐,拉著牽引繩的盲人,在它的帶領(lǐng)下越過(guò)沿路障礙,平穩(wěn)地行走著,電子導(dǎo)盲犬能否取代傳統(tǒng)導(dǎo)盲犬,解決視障人士一犬難求的困境?西工大團(tuán)隊(duì)在這方面開(kāi)展研究攻關(guān)并取得了新的突破。
近日,西北工業(yè)大學(xué)光電與智能研究院聯(lián)合中國(guó)電信人工智能研究院在探索離線具身智能應(yīng)用方面取得階段性進(jìn)展。具身智能,即具有物理實(shí)體,能夠通過(guò)傳感器和執(zhí)行器與環(huán)境進(jìn)行實(shí)時(shí)互動(dòng),執(zhí)行相應(yīng)指令或進(jìn)行決策的智能機(jī)器。
李學(xué)龍教授團(tuán)隊(duì)將機(jī)器狗搭載離線大模型,應(yīng)用在智能導(dǎo)盲場(chǎng)景,開(kāi)發(fā)出大模型離線具身智能導(dǎo)盲犬,并實(shí)現(xiàn)了其智能人機(jī)交互、智能乘梯引導(dǎo)、智能過(guò)街引導(dǎo)、智能室內(nèi)引導(dǎo)等功能。
該成果進(jìn)一步展示了使用離線具身智能導(dǎo)盲犬代替?zhèn)鹘y(tǒng)導(dǎo)盲犬的可能性,同時(shí)驗(yàn)證了離線具身智能范式的可行性,使大模型具身智能機(jī)器人可以脫離互聯(lián)網(wǎng)環(huán)境,應(yīng)用在無(wú)網(wǎng)或網(wǎng)絡(luò)信號(hào)不佳的工況環(huán)境,進(jìn)一步拓展了臨地安防的應(yīng)用場(chǎng)景。
近年來(lái),隨著機(jī)器人技術(shù)和SLAM導(dǎo)航技術(shù)的快速發(fā)展,針對(duì)電子導(dǎo)盲犬的探索也層出不窮。然而受制于自然語(yǔ)言處理技術(shù)的限制,上一代電子導(dǎo)盲犬仍然欠缺和人類(lèi)“自由對(duì)話”的能力,也難以為視障人士提供情感陪伴。
大模型及具身智能技術(shù)的出現(xiàn)使電子導(dǎo)盲犬實(shí)現(xiàn)這種高級(jí)能力成為可能。但機(jī)器狗的低算力計(jì)算平臺(tái)難以支撐大模型運(yùn)行所需的海量計(jì)算資源,通常只能通過(guò)請(qǐng)求云服務(wù)的“在線具身智能”范式獲得大模型的高級(jí)能力,這嚴(yán)重限制了電子導(dǎo)盲犬的場(chǎng)景應(yīng)用范圍。
電子導(dǎo)盲犬
為此,李學(xué)龍教授團(tuán)隊(duì)結(jié)合目前最新的大模型量化壓縮和加速推理技術(shù),成功將大模型部署至機(jī)器狗的低算力計(jì)算平臺(tái),驗(yàn)證了“離線具身智能”范式的可行性。
目前通過(guò)實(shí)驗(yàn),團(tuán)隊(duì)開(kāi)發(fā)的離線具身智能導(dǎo)盲犬已能夠與視障人士流暢溝通指令,并帶領(lǐng)其通過(guò)馬路、樓梯、電梯等多樣復(fù)雜環(huán)境,驗(yàn)證了離線具身智能導(dǎo)盲犬的智能人機(jī)交互能力、電梯弱網(wǎng)絡(luò)環(huán)境下的智能乘梯引導(dǎo)能力、實(shí)時(shí)性要求較高的智能過(guò)街引導(dǎo)能力和智能室內(nèi)引導(dǎo)能力等。
離線具身智能導(dǎo)盲犬指引視障人士進(jìn)電梯
離線具身智能導(dǎo)盲犬指引視障人士過(guò)馬路
該成果證明了離線具身智能導(dǎo)盲犬代替?zhèn)鹘y(tǒng)導(dǎo)盲犬的可能性,同時(shí)驗(yàn)證了離線具身智能范式的可行性,使大模型具身智能機(jī)器人可以脫離互聯(lián)網(wǎng),應(yīng)用在無(wú)網(wǎng)或網(wǎng)絡(luò)信號(hào)不佳的工況環(huán)境,提供更加實(shí)時(shí)的智能響應(yīng)以及更好的人機(jī)交互體驗(yàn)。
未來(lái),團(tuán)隊(duì)將進(jìn)一步優(yōu)化具身智能導(dǎo)盲犬技術(shù)方案,與電信星辰大模型相結(jié)合,探索在線與離線相融合的分布式異構(gòu)具身智能方案,進(jìn)一步拓寬離線具身智能導(dǎo)盲犬及更多智能機(jī)器人平臺(tái)的應(yīng)用場(chǎng)景,有效賦能工業(yè)生產(chǎn)智能化,加快形成新質(zhì)生產(chǎn)力。
責(zé)任編輯: 李夢(mèng)一本文鏈接:http://www.3ypm.com.cn/news-2-3860-0.html電子導(dǎo)盲犬可能要來(lái)了!相關(guān)研究在我國(guó)取得新突破
聲明:本網(wǎng)頁(yè)內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻(xiàn),不代表本站觀點(diǎn),本站不承擔(dān)任何法律責(zé)任。天上不會(huì)到餡餅,請(qǐng)大家謹(jǐn)防詐騙!若有侵權(quán)等問(wèn)題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除處理。
點(diǎn)擊右上角微信好友
朋友圈
點(diǎn)擊瀏覽器下方“”分享微信好友Safari瀏覽器請(qǐng)點(diǎn)擊“”按鈕
點(diǎn)擊右上角QQ
點(diǎn)擊瀏覽器下方“”分享QQ好友Safari瀏覽器請(qǐng)點(diǎn)擊“”按鈕