來源:新華社客戶端 時間:2024-03-22 15:50
電子導(dǎo)盲犬能否取代傳統(tǒng)導(dǎo)盲犬,解決視障人士的困境?近日,西北工業(yè)大學(xué)光電與智能研究院聯(lián)合中國電信人工智能研究院在探索離線具身智能應(yīng)用方面取得階段性進(jìn)展。團(tuán)隊將機(jī)器狗搭載離線大模型應(yīng)用在智能導(dǎo)盲場景,開發(fā)出大模型離線具身智能導(dǎo)盲犬,并實現(xiàn)了其智能人機(jī)交互、智能乘梯引導(dǎo)、智能過街引導(dǎo)、智能室內(nèi)引導(dǎo)等功能。
近年來,針對電子導(dǎo)盲犬的探索層出不窮,但機(jī)器狗的低算力計算平臺難以支撐大模型運行所需的海量計算資源,通常只能通過請求云服務(wù)的在線具身智能范式獲得大模型的高級能力,這嚴(yán)重限制了電子導(dǎo)盲犬的場景應(yīng)用范圍。
西北工業(yè)大學(xué)光電與智能研究院李學(xué)龍教授團(tuán)隊結(jié)合目前最新的大模型量化壓縮和加速推理技術(shù),成功將大模型部署至機(jī)器狗的低算力計算平臺,驗證了離線具身智能范式的可行性。
通過實驗,目前團(tuán)隊開發(fā)的離線具身智能導(dǎo)盲犬已能夠與視障人士流暢溝通指令,并帶領(lǐng)其通過馬路、樓梯、電梯等多樣復(fù)雜環(huán)境,驗證了離線具身智能導(dǎo)盲犬的智能人機(jī)交互能力、電梯弱網(wǎng)絡(luò)環(huán)境下的智能乘梯引導(dǎo)能力、實時性要求較高的智能過街引導(dǎo)能力和智能室內(nèi)引導(dǎo)能力等。
該成果進(jìn)一步展示了使用離線具身智能導(dǎo)盲犬代替?zhèn)鹘y(tǒng)導(dǎo)盲犬的可能性,同時驗證了離線具身智能范式的可行性,使大模型具身智能機(jī)器人可以脫離互聯(lián)網(wǎng)環(huán)境,應(yīng)用在無網(wǎng)或網(wǎng)絡(luò)信號不佳的工況環(huán)境,進(jìn)一步拓展了臨地安防的應(yīng)用場景。
專家表示,未來,團(tuán)隊將進(jìn)一步優(yōu)化具身智能導(dǎo)盲犬技術(shù)方案,與電信星辰大模型相結(jié)合,探索在線與離線相融合的分布式異構(gòu)具身智能方案,進(jìn)一步拓寬離線具身智能導(dǎo)盲犬及更多智能機(jī)器人平臺的應(yīng)用場景。(許祖華 孫正好)
責(zé)任編輯:沈馨蕊