違背直覺！打亂字母順序，GPT-4竟能完美復(fù)原……

AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：違背直覺！打亂字母順序，GPT-4竟能完美復(fù)原……

關(guān)鍵字：字母,句子,模型,序文,能力

文章來源：夕小瑤科技說

內(nèi)容字?jǐn)?shù)：5713字

內(nèi)容摘要：?夕小瑤科技說 原創(chuàng)作者 | 謝年年、Python 研究表明，漢字序順并不定一影閱響讀。——比如當(dāng)你看完這句話，才發(fā)現(xiàn)字全是亂的。這種情況不僅存在于漢字中，英語(yǔ)、法語(yǔ)，還有很多其他語(yǔ)言其實(shí)都適用于這個(gè)規(guī)律。這種能力稱為「typoglycemia」，即只要每個(gè)單詞的首尾字母正確，即使單詞內(nèi)部的字母被打亂，也不影響我們的正常理解。這種能力不是人類獨(dú)有，大多數(shù)強(qiáng)大的LLMs也表現(xiàn)出對(duì)詞序排列的不敏感的能力。來自EMNLP2023的一篇文章深入分析了LLMs處理亂序文本的能力，設(shè)計(jì)了兩類任務(wù)分別測(cè)試LLM從亂序句子中恢復(fù)原始句子的能力以及LLM在上下文部分亂序時(shí)回答問題的效果。實(shí)驗(yàn)結(jié)果表明，只要在亂序時(shí)保持單詞的首字母和尾字母不變，大多數(shù)強(qiáng)大的LLM可以在一定程度上處理亂序的句子。令人驚訝的是，GPT-4幾乎可以完美地處理所有亂序的輸入，即使是將單詞中所有的字母都打亂，GPT-4也能完美復(fù)原！如下…

原文鏈接：點(diǎn)此閱讀原文：違背直覺！打亂字母順序，GPT-4竟能完美復(fù)原……

聯(lián)系作者

文章來源：夕小瑤科技說

作者微信：xixiaoyaoQAQ

作者簡(jiǎn)介：更快的AI前沿，更深的行業(yè)洞見。聚集25萬AI應(yīng)用開發(fā)者、算法工程師和研究人員。一線作者均來自清北、國(guó)外頂級(jí)AI實(shí)驗(yàn)室和互聯(lián)網(wǎng)大廠，兼?zhèn)涿襟wsense與技術(shù)深度。