首頁 > 科教文衛(wèi)

西工大在大模型異構(gòu)智能體方面取得重大進(jìn)展
2023年08月04日 09:40 中國新聞網(wǎng)

  中新網(wǎng)西安8月3日電(記者 梅鐿瀧 阿琳娜)記者3日從西北工業(yè)大學(xué)獲悉,該校光電與智能研究院教授李學(xué)龍及其團(tuán)隊(duì)在大模型異構(gòu)智能體方面取得重大進(jìn)展,實(shí)現(xiàn)了大模型對無人機(jī)集群、機(jī)器狗、機(jī)械臂三種智能體的真機(jī)協(xié)同控制。為智能無人系統(tǒng)的研究提供了無限可能。

西北工業(yè)大學(xué)在大模型異構(gòu)智能體方面取得重大進(jìn)展!∥鞅惫I(yè)大學(xué)供圖
西北工業(yè)大學(xué)在大模型異構(gòu)智能體方面取得重大進(jìn)展。 西北工業(yè)大學(xué)供圖

  在人工智能領(lǐng)域,大模型控制智能體是大勢所趨。該團(tuán)隊(duì)提出了一種大模型驅(qū)動的異構(gòu)智能體協(xié)同控制算法框架,使異構(gòu)智能體系統(tǒng)具備高層語義理解能力、自身技能認(rèn)知能力和復(fù)雜任務(wù)執(zhí)行能力。該框架可將一個跨場景、跨智能體的復(fù)雜任務(wù),通過語義理解和任務(wù)分解拆分成異構(gòu)智能體協(xié)同執(zhí)行的多個子任務(wù),然后通過無人機(jī)集群、機(jī)器狗、機(jī)械臂的聯(lián)合控制,實(shí)現(xiàn)異構(gòu)智能體的高效協(xié)作。

圖為演示畫面!∥鞅惫I(yè)大學(xué)供圖
圖為演示畫面!∥鞅惫I(yè)大學(xué)供圖

  據(jù)介紹,針對大模型異構(gòu)智能體的高層語義理解能力問題,該團(tuán)隊(duì)利用國產(chǎn)大模型作為語義理解底座,以無人機(jī)集群、機(jī)器狗、機(jī)械臂三種異構(gòu)智能體作為協(xié)同控制平臺,設(shè)計(jì)了融合環(huán)境信息與自身狀態(tài)的語義交互框架,實(shí)現(xiàn)了對異構(gòu)智能體任務(wù)理解、硬件控制、協(xié)調(diào)合作等復(fù)雜需求的高層語義交互。

  同時,為了讓大模型異構(gòu)智能體實(shí)現(xiàn)自身技能認(rèn)知能力這一目標(biāo),該團(tuán)隊(duì)提出了異構(gòu)智能體通用中層技能認(rèn)知算法,實(shí)現(xiàn)了異構(gòu)智能體間精細(xì)的硬件協(xié)同控制。在此基礎(chǔ)上,智能體通過自主環(huán)境感知、自身狀態(tài)建模、協(xié)同運(yùn)動規(guī)劃,自適應(yīng)地調(diào)整技能執(zhí)行。

  此外,針對大模型異構(gòu)智能體的復(fù)雜任務(wù)執(zhí)行能力問題,該團(tuán)隊(duì)設(shè)計(jì)了多智能體閉環(huán)反饋的任務(wù)執(zhí)行機(jī)制,實(shí)現(xiàn)了異構(gòu)智能體在任務(wù)執(zhí)行層面的自主協(xié)同。在任務(wù)執(zhí)行的過程中,智能體向任務(wù)分解模塊報告子任務(wù)執(zhí)行狀態(tài),形成任務(wù)分配與執(zhí)行動態(tài)閉環(huán),實(shí)現(xiàn)任務(wù)目標(biāo)導(dǎo)向的異構(gòu)智能體高效協(xié)同。

  據(jù)悉,該成果是大模型算法和智能體硬件交叉的創(chuàng)新性研究,實(shí)現(xiàn)了用更自然、更直觀的方式進(jìn)行多種智能體的控制,降低了人機(jī)交互的門檻。同時,該研究也將促進(jìn)異構(gòu)智能體之間協(xié)作的自主性和流暢度,對人工智能在災(zāi)難救援、工業(yè)生產(chǎn)等復(fù)雜場景下的靈活應(yīng)用具有重要意義。(完)

責(zé)任編輯:崔景靚