AIGC動態(tài)歡迎閱讀

原標(biāo)題：Agent觸摸漢堡辨冷熱，首次擁有類人感官！UCLA等發(fā)布3D多模態(tài)交互具身智能大模型
關(guān)鍵字：感官,物體,模型,對象,智能
文章來源：新智元
內(nèi)容字?jǐn)?shù)：11981字

內(nèi)容摘要：

新智元報道編輯：桃子 好困
【新智元導(dǎo)讀】Sam Altman認(rèn)為AGI很快就會降臨，但若是沒有感官兼?zhèn)涞腁I何以稱為智能？最近，UCLA等機構(gòu)研究人員提出多模態(tài)具身智能大模型MultiPLY，AI可以知冷知熱、辨音識物。具身智能，是大模型未來應(yīng)用的一個重要方向。
現(xiàn)在，大模型加持下的智能體，能夠參與3D環(huán)境，不僅有了聽覺視覺，還有了觸覺等多種感力。
臥室里有什么物體，一眼辨認(rèn)。
聽到門鈴響了，LLM便會告訴你家里來客人了。
大模型加持的NPC，在觸摸桌子的香蕉后，發(fā)現(xiàn)沒熟并建議不要吃。
甚至，它還能感受到物體的溫度，餐桌上的漢堡已經(jīng)涼了，會告訴你加熱后再吃。
除此之外，這些智能體借助LLM之力，還擅長使用工具、物體檢索、導(dǎo)航、任務(wù)分解等多種任務(wù)。
來自UMass Amherst、UCLA和MIT-IBM Watson AI Lab研究人員，推出了全新的具身智能大模型MultiPLY。
通過智能體與3D環(huán)境交互，MultiPLY呈現(xiàn)了大模型多感力，無縫地連接了語言、動作和感知！
論文地址：https://arxiv.org/abs/2401.08577
在推理過程中，Mult

原文鏈接：Agent觸摸漢堡辨冷熱，首次擁有類人感官！UCLA等發(fā)布3D多模態(tài)交互具身智能大模型

聯(lián)系作者

文章來源：新智元
作者微信：AI_era
作者簡介：智能+中國主平臺，致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點關(guān)注人工智能、機器人等前沿領(lǐng)域發(fā)展，關(guān)注人機融合、人工智能和機器人對人類社會與文明進(jìn)化的影響，領(lǐng)航中國新智能時代。