AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：ChatGPT無法取代人類程序員！ IEEE 35頁論文測出困難編碼正確率僅為0.66%
關(guān)鍵字：代碼,問題,難度,復(fù)雜度,語言
文章來源：新智元
內(nèi)容字?jǐn)?shù)：0字

內(nèi)容摘要：

新智元報(bào)道編輯：編輯部
【新智元導(dǎo)讀】6月，IEEE刊登了一篇對(duì)ChatGPT代碼生成任務(wù)進(jìn)行系統(tǒng)評(píng)估的論文，數(shù)據(jù)集就是程序員們最愛的LeetCode題庫。研究揭示了LLM在代碼任務(wù)現(xiàn)的潛在問題和能力局限，讓我們能夠?qū)δＰ妥龀鲞M(jìn)一步改進(jìn)，并逐漸了解使用ChatGPT寫代碼的最佳姿勢。有了ChatGPT，還需要人類程序猿編碼嗎？
上個(gè)月，一項(xiàng)發(fā)表在IEEE TSE期刊（Transactions on Software Engineering）上的研究評(píng)估了ChatGPT所生成的代碼在功能性、復(fù)雜性和安全性方面的表現(xiàn)。
結(jié)果顯示，ChatGPT生成可用代碼的能力差異很大。
其成功率從0.66%到89%不等，這主要取決于任務(wù)的難度、編程語言等多種因素。
論文地址：https://ieeexplore.ieee.org/document/10507163
具體來說，研究人員測試了GPT-3.5在5種編程語言（C、C++、Java、JavaScript和Python）中，解決LeetCode測試平臺(tái)上的728個(gè)編碼問題，以及應(yīng)對(duì)18個(gè)CWE（常見缺陷枚舉）場景的能力。
雖然在某些情況下，A

原文鏈接：ChatGPT無法取代人類程序員！ IEEE 35頁論文測出困難編碼正確率僅為0.66%

聯(lián)系作者

文章來源：新智元
作者微信：AI_era
作者簡介：智能+中國主平臺(tái)，致力于推動(dòng)中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點(diǎn)關(guān)注人工智能、機(jī)器人等前沿領(lǐng)域發(fā)展，關(guān)注人機(jī)融合、人工智能和機(jī)器人對(duì)人類社會(huì)與文明進(jìn)化的影響，領(lǐng)航中國新智能時(shí)代。