AIGC動態歡迎閱讀

原標題：鵝廠新智能體亮相！操縱手機水平媲美真人，GitHub一周獲1.5K星
關鍵字：騰訊,操作,界面,人類,模型
文章來源：量子位
內容字數：2333字

內容摘要：

克雷西 發自 凹非寺量子位 | 公眾號 QbitAI一不留神，大模型已經學會了操縱手機？
最近，騰訊最新多模態智能體框架AppAgent曝光，可以像人類一樣操作各種應用。
比如在地圖軟件中輸入目標地址，然后喚起導航。
或者想要發一封郵件，AppAgent也能輕松編寫，然后直接在客戶端中發送。
就算是“”的驗證碼，也絲毫難不住AppAgent。
甚至是用Lightroom這樣人類都不一定會的專業軟件P圖，也能三下五除二地完成。
而且它還可以觀察人類操作，甚至是自主探索，不用教就能學會新的APP。
目前，該項目在GitHub上已經取得了1.5k星標。
操縱水平超越GPT4為了更具體地評估AppAgent的表現，研究團隊一共在10個不同的應用程序上測試了50個任務，其中還包括沒有學習過的新APP或操作，結果它都能出色完成。
除了P圖的效果由人工評判，AppAgent在其它九個APP上的表現，分別用成功率（SR）、獎勵分數和平均步數來衡量。
在自動探索模式下時，AppAgent完成這些任務的成功率達到了73.3%，學習過DEMO之后可以提升到84.4%。
雖然離人類手工指導的95.6%還

原文鏈接：鵝廠新智能體亮相！操縱手機水平媲美真人，GitHub一周獲1.5K星

聯系作者

文章來源：量子位
作者微信：QbitAI
作者簡介：追蹤人工智能新趨勢，關注科技行業新突破