大模型勇闖洛圣都，加封「GTA五星好市民」！南洋理工、清華等發(fā)布視覺可編程智能體Octopus：打游戲、做家務(wù)全能干

AIGC動態(tài)歡迎閱讀

原標(biāo)題：大模型勇闖洛圣都，加封「GTA五星好市民」！南洋理工、清華等發(fā)布視覺可編程智能體Octopus：打游戲、做家務(wù)全能干

關(guān)鍵字：任務(wù),模型,研究者,報告,視覺

文章來源：新智元

內(nèi)容字?jǐn)?shù)：16924字

內(nèi)容摘要：新智元報道編輯：LRS 好困【新智元導(dǎo)讀】讓視覺語言模型（VLM）在模擬的電子世界里游玩是什么體驗(yàn)？讓Octopus根據(jù)智能體的觀測寫控制代碼，即可實(shí)現(xiàn)讓VLM做家務(wù)、闖蕩洛圣都。隨著游戲制作技術(shù)的不斷發(fā)展，電子游戲已然成為現(xiàn)實(shí)世界的模擬舞臺。以游戲《俠盜獵車手》（GTA）為例，在GTA的世界里，玩家可以以第一人稱視角，在洛圣都（游戲虛擬城市）當(dāng)中經(jīng)歷豐富多彩的生活。然而，既然人類玩家能夠在洛圣都…

原文鏈接：點(diǎn)此閱讀原文：大模型勇闖洛圣都，加封「GTA五星好市民」！南洋理工、清華等發(fā)布視覺可編程智能體Octopus：打游戲、做家務(wù)全能干

聯(lián)系作者

文章來源：新智元

作者微信：AI_era

作者簡介：智能+中國主平臺，致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點(diǎn)關(guān)注人工智能、機(jī)器人等前沿領(lǐng)域發(fā)展，關(guān)注人機(jī)融合、人工智能和機(jī)器人對人類社會與文明進(jìn)化的影響，領(lǐng)航中國新智能時代。