誰說大象不能起舞! 重編程大語言模型實(shí)現(xiàn)跨模態(tài)交互的時(shí)序預(yù)測 | ICLR 2024
AIGC動(dòng)態(tài)歡迎閱讀
原標(biāo)題:誰說大象不能起舞! 重編程大語言模型實(shí)現(xiàn)跨模態(tài)交互的時(shí)序預(yù)測 | ICLR 2024
關(guān)鍵字:時(shí)序,模型,數(shù)據(jù),序列,語言
文章來源:機(jī)器之心
內(nèi)容字?jǐn)?shù):8207字
內(nèi)容摘要:
機(jī)器之心專欄
機(jī)器之心編輯部最近,來自澳大利亞蒙納士大學(xué)、螞蟻集團(tuán)、IBM 研究院等機(jī)構(gòu)的研究人員探索了模型重編程 (model reprogramming) 在大語言模型 (LLMs) 上應(yīng)用,并提出了一個(gè)全新的視角:高效重編程大語言模型進(jìn)行通用時(shí)序預(yù)測 –- 其提出的 Time-LLM 框架無需修改語言模型即可實(shí)現(xiàn)高精度時(shí)序預(yù)測,在多個(gè)數(shù)據(jù)集和預(yù)測任務(wù)中超越了傳統(tǒng)的時(shí)序模型,讓 LLMs 在處理跨模態(tài)的時(shí)間序列數(shù)據(jù)時(shí)展現(xiàn)出色,就像大象起舞一般!近期,受到大語言模型在通用智能領(lǐng)域的啟發(fā),「大模型 + 時(shí)序 / 時(shí)空數(shù)據(jù)」這個(gè)新方向迸發(fā)出了許多相關(guān)進(jìn)展。當(dāng)前的 LLMs 有潛力徹底改變時(shí)序 / 時(shí)空數(shù)據(jù)挖掘方式,從而促進(jìn)城市、能源、交通、遙感等典型復(fù)雜系統(tǒng)的決策高效制定,并朝著更普遍的時(shí)序 / 時(shí)空分析智能形式邁進(jìn)。大模型,例如語言和其他相關(guān)的基礎(chǔ)模型,既可以訓(xùn)練,也可以巧妙地重新調(diào)整其用途,以處理一系列通用任務(wù)和專用領(lǐng)域應(yīng)用中的時(shí)間序列和時(shí)空數(shù)據(jù)。來源:https://arxiv.org/pdf/2310.10196.pdf
最近的研究將大型語言模型從處理自然語言拓展到時(shí)間序列和時(shí)空
原文鏈接:誰說大象不能起舞! 重編程大語言模型實(shí)現(xiàn)跨模態(tài)交互的時(shí)序預(yù)測 | ICLR 2024
聯(lián)系作者
文章來源:機(jī)器之心
作者微信:almosthuman2014
作者簡介:專業(yè)的人工智能媒體和產(chǎn)業(yè)服務(wù)平臺(tái)