AIGC動態歡迎閱讀
原標題:Google 發布 CodeGemma:7B 力壓 CodeLLaMa-13B
關鍵字:模型,代碼,性能,自然語言,作者
文章來源:夕小瑤科技說
內容字數:2984字
內容摘要:
夕小瑤科技說 原創作者 | 任同學剛剛發布!Google 帶來了新的 Gemma 家族成員,CodeGemma,這是基于預訓練的 Gemma-2B 和 Gemma-7B 的代碼生成模型。
其上下文窗口長度為8K,在另外 500 B 個主要由英語、數學和代碼組成的 token 上進行了訓練,改進了邏輯和數學推理能力,適合代碼生成任務。
CodeGemma-7B 在 HumanEval 上的表現優于類似大小的7B模型,甚至還要超過 CodeLLaMa-13B。
不過,在 DeepSeekCoder-7B 面前,CodeGemma 還是要稍遜一籌!
CodeGemma支持包括 Python、JavaScript、Java、Kotlin、C++、C#、Rust、Go 在內的多種編程語言。
CodeGemma包含三款模型:
CodeGemma 2B Base Model,專門針對代碼生成進行訓練,旨在快速生成代碼,適合需要隱私或高性能代碼生成的環境。
CodeGemma 7B Base Model,訓練數據包括80%的代碼和20%的自然語言,適合代碼生成和理解。
CodeGemma 7B Ins
原文鏈接:Google 發布 CodeGemma:7B 力壓 CodeLLaMa-13B
聯系作者
文章來源:夕小瑤科技說
作者微信:xixiaoyaoQAQ
作者簡介:專業、有趣、深度價值導向的科技媒體。聚集30萬AI工程師、研究員,覆蓋500多家海內外機構投資人,互聯網大廠中高管和AI公司創始人。一線作者來自清北、國內外頂級AI實驗室和大廠,兼備敏銳的行業嗅覺和洞察深度。商務合作:zym5189