電子導(dǎo)盲犬能否取代傳統(tǒng)導(dǎo)盲犬解決視障人士一犬難求的問題?3月20日,記者從西北工業(yè)大學(xué)獲悉:該校光電與智能研究院聯(lián)合中國電信人工智能研究院在探索離線具身智能應(yīng)用方面取得新突破,開發(fā)的離線具身智能導(dǎo)盲犬已能夠與視障人士流暢溝通指令。

具身智能機(jī)器,即具有物理實(shí)體,能夠通過傳感器和執(zhí)行器與環(huán)境進(jìn)行實(shí)時互動,執(zhí)行相應(yīng)指令或進(jìn)行決策的智能機(jī)器。

近年來,隨著機(jī)器人技術(shù)和相關(guān)導(dǎo)航技術(shù)的快速發(fā)展,針對電子導(dǎo)盲犬的探索越來越多。然而受自然語言處理技術(shù)的限制,上一代電子導(dǎo)盲犬仍然欠缺和人類“自由對話”的能力,也難以為視障人士提供情感陪伴。

大模型及具身智能技術(shù)的出現(xiàn),使電子導(dǎo)盲犬擁有這種高級能力成為可能。但機(jī)器狗的低算力計算平臺難以支撐大模型運(yùn)行所需的海量計算,通常只能通過請求云服務(wù)的“在線具身智能”范式獲得大模型的高級能力,嚴(yán)重限制了電子導(dǎo)盲犬的場景應(yīng)用范圍。

為此,西工大李學(xué)龍教授團(tuán)隊結(jié)合目前最新的大模型量化壓縮和加速推理技術(shù),成功將大模型部署至機(jī)器狗的低算力計算平臺,開發(fā)出大模型離線具身智能導(dǎo)盲犬。

通過實(shí)驗,團(tuán)隊開發(fā)的離線具身智能導(dǎo)盲犬已能夠與視障人士流暢溝通指令,并帶領(lǐng)其通過馬路、樓梯、電梯等復(fù)雜環(huán)境,具備智能人機(jī)交互能力、電梯弱網(wǎng)絡(luò)環(huán)境下的智能乘梯引導(dǎo)能力、實(shí)時性要求較高的智能過街引導(dǎo)能力和智能室內(nèi)引導(dǎo)能力等。

該成果證明了離線具身智能導(dǎo)盲犬代替?zhèn)鹘y(tǒng)導(dǎo)盲犬的可能性,同時驗證了離線具身智能范式的可行性,使大模型具身智能機(jī)器人可以脫離互聯(lián)網(wǎng),應(yīng)用在無網(wǎng)或網(wǎng)絡(luò)信號不佳的工況環(huán)境,提供更加實(shí)時的智能響應(yīng)以及更好的人機(jī)交互體驗。

未來,團(tuán)隊將進(jìn)一步優(yōu)化具身智能導(dǎo)盲犬技術(shù)方案,進(jìn)一步拓展離線具身智能導(dǎo)盲犬及更多智能機(jī)器人平臺的應(yīng)用場景,有效賦能工業(yè)生產(chǎn)智能化,加快形成新質(zhì)生產(chǎn)力。

責(zé)任編輯:黃蕊