「智猩猩AI新青年講座」由智猩猩出品,致力于邀請(qǐng)青年學(xué)者,主講他們?cè)谏墒紸I、LLM、AI Agent、CV等人工智能領(lǐng)域的最新重要研究成果。

AI新青年是加速人工智能前沿研究的新生力量。AI新青年的視頻講解和直播答疑,將可以幫助大家增進(jìn)對(duì)人工智能前沿研究的理解,相應(yīng)領(lǐng)域的專業(yè)知識(shí)也能夠得以積累加深。同時(shí),通過與AI新青年的直接交流,大家在AI學(xué)習(xí)和應(yīng)用AI的過程中遇到的問題,也能夠盡快解決。

「智猩猩AI新青年講座」現(xiàn)已完結(jié)233講,錯(cuò)過往期講座直播的朋友,可以點(diǎn)擊文章底部 “ 閱讀原文 ” 進(jìn)行回看!

近來,大型語(yǔ)言模型(LLMs)在單智能體決策中取得了令人印象深刻的表現(xiàn),并且可以為機(jī)器人控制設(shè)計(jì)獎(jiǎng)勵(lì)函數(shù)。但目前的具身智能體亦或缺乏彼此間的有效交流合作能力,亦或行為不能被人類理解,給人與智能體之間的協(xié)作帶來了很大的阻礙,且LLMs是否具備多智能體協(xié)作所必需的能力也仍尚未明確。

針對(duì)以上問題,馬薩諸塞大學(xué)阿默斯特分校在讀博士張洪鑫利用如今大語(yǔ)言模型豐富的世界常識(shí)、自由形式語(yǔ)言生成(free-form language generation)、復(fù)雜推理等能力,構(gòu)建了基于LLMs的具身智能體CoELA,以在具有挑戰(zhàn)性的分散環(huán)境中完成長(zhǎng)期多目標(biāo)任務(wù),最終實(shí)現(xiàn)了與其他智能體和人類進(jìn)行高效的計(jì)劃、通信與合作的功能。相關(guān)論文《Building Cooperative Embodied Agents Modularly with Large Language Models》收錄于ICLR 2024

CoELA一作張洪鑫:使用大語(yǔ)言模型構(gòu)建合作型具身智能體|智猩猩AI新青年講座預(yù)告

CoELA由五個(gè)關(guān)鍵模塊組成:

(1)感知模塊:處理傳感器獲得的外部原始數(shù)據(jù),更新記憶模塊的存儲(chǔ)信息;
(2)記憶模塊:模仿人類的長(zhǎng)期記憶,以語(yǔ)義、情景和程序記憶的形式存儲(chǔ)智能體關(guān)于世界和他人的事實(shí)與經(jīng)歷;
(3)溝通模塊:從記憶模塊檢索相關(guān)信息,引導(dǎo)LLMs利用其強(qiáng)大的自由形式語(yǔ)言生成能力生成最佳信息;
(4)決策模塊:利用LLMs的強(qiáng)大推理能力 ,根據(jù)從記憶模塊中檢索的相關(guān)信息和針對(duì)當(dāng)前狀態(tài)決定采取哪種方案,生成的計(jì)劃會(huì)再次更新記憶模塊;
(5)執(zhí)行模塊:檢索記憶模塊中存儲(chǔ)的程序知識(shí),將高級(jí)計(jì)劃轉(zhuǎn)化為可在環(huán)境中執(zhí)行的基本行動(dòng)。

CoELA一作張洪鑫:使用大語(yǔ)言模型構(gòu)建合作型具身智能體|智猩猩AI新青年講座預(yù)告

4月12日上午10點(diǎn),智猩猩邀請(qǐng)到論文一作、馬薩諸塞大學(xué)阿默斯特分校在讀博士張洪鑫參與「AI新青年講座」234講,主講《使用大語(yǔ)言模型構(gòu)建合作型具身智能體》。

主講人

張洪鑫,馬薩諸塞大學(xué)阿默斯特分校在讀博士

師從淦創(chuàng)教授,研究興趣為具身智能、人機(jī)交互、自然語(yǔ)言處理,在ICLR、NeurIPS、ACL、EMNLP等會(huì)議上發(fā)表有多篇論文,為NeurIPS、CVPR、ACL等會(huì)議擔(dān)任審稿人。

第234講

主 題
使用大語(yǔ)言模型構(gòu)建合作型具身智能體
提 綱
1、大語(yǔ)言模型在智能體領(lǐng)域的應(yīng)用現(xiàn)狀概述
2、利用大語(yǔ)言模型構(gòu)建模塊化具身智能體CoELA
3、CoELA的五個(gè)核心模塊協(xié)作流程
4、實(shí)驗(yàn)結(jié)果分析及展望

直 播 信 息

直播時(shí)間:4月12日10:00
直播地點(diǎn):智猩猩知識(shí)店鋪

成果

論文標(biāo)題
《Building Cooperative Embodied Agents Modularly with Large Language Models》
論文鏈接
https://arxiv.org/abs/2307.02485
項(xiàng)目網(wǎng)站
https://vis-www.cs.umass.edu/Co-LLM-Agents/

報(bào)名方式

對(duì)本次講座感興趣朋友,可以掃描下方二維碼,添加小助手李宛兒進(jìn)行報(bào)名。已添加過李宛兒的老朋友,可以給李宛兒私信,發(fā)送“234”即可報(bào)名。

我們會(huì)為審核通過的朋友推送直播鏈接。同時(shí),本次講座也組建了學(xué)習(xí)群,直播開始前會(huì)邀請(qǐng)審核通過的相關(guān)朋友入群交流。

CoELA一作張洪鑫:使用大語(yǔ)言模型構(gòu)建合作型具身智能體|智猩猩AI新青年講座預(yù)告