當前瀏覽器版本過(guò)低，建議升級到Internet Explorer 9及以上版本或者安裝Chrome內核瀏覽器獲得最佳瀏覽體驗。
“經(jīng)開(kāi)團隊”研發(fā)“慧心極目·明眼快手”大模型機械臂系統
大中小6月12日，記者從大學(xué)科技園片區運營(yíng)團隊獲悉，近日，重慶郵電大學(xué)慧心極目科研團隊成功研發(fā)了一套名為“慧心極目·明眼快手”的大模型機械臂系統，以圖像和語(yǔ)音指令為輸入，結合視覺(jué)語(yǔ)言大模型進(jìn)行智能分析與決策，使機械臂能夠準確理解人類(lèi)語(yǔ)言并執行復雜任務(wù)。從仿真環(huán)境到現實(shí)世界，該多模態(tài)大模型機械臂系統通過(guò)具身智能的支持，實(shí)現了更高級別的智能操作。
“慧心極目·明眼快手”大模型機械臂系統具備環(huán)境感知、關(guān)聯(lián)推理、自主決策和交互學(xué)習等功能。該系統通過(guò)實(shí)時(shí)感知和交互，與環(huán)境進(jìn)行互動(dòng)，使智能機械臂能夠像人類(lèi)一樣在真實(shí)物理環(huán)境中感知、理解并執行各種任務(wù)。具體而言，系統通過(guò)攝像頭獲取視覺(jué)信息感知環(huán)境，利用語(yǔ)音傳感器監聽(tīng)用戶(hù)語(yǔ)音指令，然后通過(guò)語(yǔ)言視覺(jué)大模型分析多模態(tài)信息，實(shí)現多傳感器融合感知、復雜指令理解、智能分析與決策，最終生成具體控制指令，通過(guò)機械臂軌跡規劃和末端抓取控制，執行復雜任務(wù)。
慧心極目團隊致力于人機混合智能增強交互研究，通過(guò)多模態(tài)視覺(jué)大模型和機器人智能控制算法的研發(fā)，探索人在回路的內在原理，推動(dòng)人機混合智能交互的發(fā)展，實(shí)現人機協(xié)同與具身智能?！盎坌臉O目·明眼快手”大模型機械臂系統在高新波教授的帶領(lǐng)下完成，項目核心成員包括冷佳旭副教授、甘吉副教授，以及研一學(xué)生黎泉、李昆鴻等。
