0
| 本文作者： nebula | 2024-11-12 15:17 |
11月12日，阿里云通義大模型團隊開源通義千問代碼模型全系列，共6款Qwen2.5-Coder模型。相關評測顯示，6款代碼模型在同等尺寸下均取得了業界最佳效果，其中32B尺寸的旗艦代碼模型在十余項基準評測中均取得開源最佳成績，成為全球最強開源代碼模型，同時，該代碼模型還在代碼生成等多項關鍵能力上超越閉源模型GPT-4o。基于Qwen2.5-Coder，AI編程性能和效率均實現大幅提升，編程“小白”也可輕松生成網站、數據圖表、簡歷、游戲等各類應用。
編程語言是高度邏輯化和結構化的，代碼模型要求理解、生成和處理這些復雜的邏輯關系和結構，通常也被認為是大模型邏輯能力的基礎來源之一，對于整體提升大模型推理能力至關重要。Qwen2.5-Coder基于Qwen2.5基礎大模型進行初始化，使用源代碼、文本代碼混合數據、合成數據等5.5T tokens的數據持續訓練，實現了代碼生成、代碼推理、代碼修復等核心任務性能的顯著提升。
其中，本次新發布的旗艦模型Qwen2.5-Coder-32B-Instruct，在EvalPlus、LiveCodeBench、BigCodeBench等十余個主流的代碼生成基準上，均刷新了開源模型的得分紀錄，并在考察代碼修復能力的Aider、多編程語言能力的McEval等9個基準上優于GPT-4o，實現了開源模型對閉源模型的反超。
在代碼推理方面，Qwen2.5-Coder-32B-Instruct刷新了CRUXEval-O基準開源模型的最佳紀錄。Qwen2.5-Coder-32B-Instruct在40 余種編程語言中表現優異，在McEval基準上取得了所有開閉源模型的最高分，并斬獲考察多編程語言代碼修復能力的MdEval基準的開源冠軍。
此次開源，Qwen2.5-Coder推出0.5B/1.5B/3B/7B/14B/32B 等6個尺寸的全系列模型，每個尺寸都開源了Base 和 Instruct 模型，其中，Base模型可供開發者微調，Instruct模型則是開箱即用的官方對齊模型，所有Qwen2.5-Coder模型在同等尺寸下均取得了模型效果最佳（SOTA）表現。
Qwen2.5-Coder全系列開源，可適配更多應用場景，無論在端側還是云上，都可以讓AI大模型更好地協助開發者完成編程開發，即便是編程“小白”，也可基于內置Qwen2.5-Coder的代碼助手和可視化工具，用自然語言對話生成網站、數據圖表、簡歷和游戲等各類應用。
截至目前，Qwen2.5已開源100多個大語言模型、多模態模型、數學模型和代碼模型，幾乎所有模型都實現了同等尺寸下的最佳性能。據了解，全球基于Qwen系列二次開發的衍生模型數量9月底突破7.43萬，超越Llama系列衍生模型的7.28萬，通義千問已成為全球最大的生成式語言模型族群。
雷峰網(公眾號：雷峰網)
