阿里云通義千問14B模型開源!

來(lái)源:阿里云
作者:阿里云
時(shí)間:2023-09-26
3325
今天,阿里云發(fā)布通義千問140億參數(shù)模型Qwen-14B及其對(duì)話模型Qwen-14B-Chat,免費(fèi)開源可使用。

今天,阿里云發(fā)布通義千問140億參數(shù)模型Qwen-14B及其對(duì)話模型Qwen-14B-Chat,免費(fèi)開源可使用。

Qwen-14B在多個(gè)權(quán)威評(píng)測(cè)中超越同等規(guī)模模型,部分指標(biāo)甚至接近Llama2-70B。阿里云此前開源了70億參數(shù)模型Qwen-7B等,一個(gè)多月下載量破100萬(wàn),成為開源社區(qū)的口碑之作。

Qwen-14B是一款支持多種語(yǔ)言的高性能開源模型,相比同類模型使用了更多的高質(zhì)量數(shù)據(jù),整體訓(xùn)練數(shù)據(jù)超過3萬(wàn)億Token,使得模型具備更強(qiáng)大的推理、認(rèn)知、規(guī)劃和記憶能力。Qwen-14B最大支持8k的上下文窗口長(zhǎng)度。

640.jpg

Qwen-14B在十二個(gè)權(quán)威測(cè)評(píng)中全方位超越同規(guī)模SOTA大模型

Qwen-14B-Chat是在基座模型上經(jīng)過精細(xì)SFT得到的對(duì)話模型。借助基座模型強(qiáng)大性能,Qwen-14B-Chat生成內(nèi)容的準(zhǔn)確度大幅提升,也更符合人類偏好,內(nèi)容創(chuàng)作上的想象力和豐富度也有顯著擴(kuò)展。

Qwen擁有出色的工具調(diào)用能力,能讓開發(fā)者更快地構(gòu)建基于Qwen的Agent(智能體)。開發(fā)者可用簡(jiǎn)單指令教會(huì)Qwen使用復(fù)雜工具,比如使用Code Interpreter工具執(zhí)行Python代碼以進(jìn)行復(fù)雜的數(shù)學(xué)計(jì)算、數(shù)據(jù)分析、圖表繪制等;還能開發(fā)具有多文檔問答、長(zhǎng)文寫作等能力的“高級(jí)數(shù)字助理”。

640.gif

百億以內(nèi)參數(shù)級(jí)別大語(yǔ)言模型是目前開發(fā)者進(jìn)行應(yīng)用開發(fā)和迭代的主流選擇,Qwen-14B進(jìn)一步提高了小尺寸模型的性能上限,從眾多同尺寸模型中沖出重圍,在MMLU、C-Eval、GSM8K、MATH、GaoKao-Bench等12個(gè)權(quán)威測(cè)評(píng)中取得最優(yōu)成績(jī),超越所有測(cè)評(píng)中的SOTA(State-Of-The-Art)大模型,也全面超越Llama-2-13B,比起Llama 2的34B、70B模型也并不遜色。與此同時(shí),Qwen-7B也全新升級(jí),核心指標(biāo)最高提升22.5%。

640.png

Qwen-14B性能超越同尺寸模型

用戶可從魔搭社區(qū)直接下載模型,也可通過阿里云靈積平臺(tái)訪問和調(diào)用Qwen-14B和Qwen-14B-Chat。阿里云為用戶提供包括模型訓(xùn)練、推理、部署、精調(diào)等在內(nèi)的全方位服務(wù)。

8月,阿里云開源通義千問70億參數(shù)基座模型Qwen-7B,先后沖上HuggingFace、Github的trending榜單。短短一個(gè)多月,累計(jì)下載量突破100萬(wàn)。開源社區(qū)出現(xiàn)了50多個(gè)基于Qwen的模型,社區(qū)多個(gè)知名的工具和框架都集成了Qwen。

640 (1).png

通義千問是落地最深、應(yīng)用最廣的中國(guó)大模型,國(guó)內(nèi)已有多個(gè)月活過億的應(yīng)用接入通義千問,大量中小企業(yè)、科研機(jī)構(gòu)和個(gè)人開發(fā)者都在基于通義千問開發(fā)專屬大模型或應(yīng)用產(chǎn)品,如阿里系的淘寶、釘釘、未來(lái)精靈(原天貓精靈),以及外部的科研機(jī)構(gòu)、創(chuàng)業(yè)企業(yè)。

·浙江大學(xué)聯(lián)合高等教育出版社基于Qwen-7B開發(fā)了智海-三樂教育垂直大模型,已在全國(guó)12所高校應(yīng)用,可提供智能問答、試題生成、學(xué)習(xí)導(dǎo)航、教學(xué)評(píng)估等能力,模型已在阿里云靈積平臺(tái)對(duì)外提供服務(wù),一行代碼即可調(diào)用;

640 (1).gif

·浙江有鹿機(jī)器人科技有限公司在路面清潔機(jī)器人中集成了Qwen-7B,使機(jī)器人能以自然語(yǔ)言與用戶進(jìn)行實(shí)時(shí)交互,理解用戶提出的需求,將用戶的高層指令進(jìn)行分析和拆解,做高層的邏輯分析和任務(wù)規(guī)劃,完成清潔任務(wù)。

640 (2).gif

阿里云CTO周靖人表示,阿里云將持續(xù)擁抱開源開放,推動(dòng)中國(guó)大模型生態(tài)建設(shè)。阿里云篤信開源開放的力量,率先開源自研大模型,希望讓大模型技術(shù)更快觸達(dá)中小企業(yè)和個(gè)人開發(fā)者。

阿里云還牽頭建設(shè)了中國(guó)最大的AI模型開源社區(qū)魔搭ModelScope,團(tuán)結(jié)全行業(yè)的力量,共同推動(dòng)大模型技術(shù)普惠和應(yīng)用落地。過去兩個(gè)月內(nèi),魔搭社區(qū)的模型下載量從4500萬(wàn)飆升到8500萬(wàn),增幅接近100%。

魔搭社區(qū)模型地址:

https://www.modelscope.cn/models/qwen/Qwen-14B-Chat/summary

https://www.modelscope.cn/models/qwen/Qwen-14B/summary

魔搭社區(qū)模型體驗(yàn):

https://modelscope.cn/studios/qwen/Qwen-14B-Chat-Demo/summary

阿里云靈積平臺(tái)地址:

https://help.aliyun.com/zh/dashscope/developer-reference/tongyi-qianwen-7b-14b-api-detailes

https://dashscope.console.aliyun.com/model

Qwen論文地址:

https://qianwen-res.oss-cn-beijing.aliyuncs.com/QWEN_TECHNICAL_REPORT.pdf

Github:

https://github.com/QwenLM/Qwen

HuggingFace:

https://huggingface.co/Qwen/Qwen-14B

https://huggingface.co/Qwen/Qwen-14B-Chat

立即登錄,閱讀全文
原文鏈接:點(diǎn)擊前往 >
版權(quán)說(shuō)明:本文內(nèi)容來(lái)自于阿里云,本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個(gè)人觀點(diǎn),不代表快出海對(duì)觀點(diǎn)贊同或支持。如有侵權(quán),請(qǐng)聯(lián)系管理員(zzx@kchuhai.com)刪除!
相關(guān)文章
阿里云助力《誅仙世界》端游正式開服!
阿里云助力《誅仙世界》端游正式開服!
近?,完美世界游戲歷時(shí)多年打造的新國(guó)?仙俠MMORPG端游《誅仙世界》在阿?云上正式開服。
阿里云
云服務(wù)
2024-12-29
一文詳解阿里云AI大基建
一文詳解阿里云AI大基建
面向AI時(shí)代,阿里云基礎(chǔ)設(shè)施是如何創(chuàng)新與發(fā)展的?計(jì)算、網(wǎng)絡(luò)、存儲(chǔ)、服務(wù)器、集群、可觀測(cè)等,阿里云全新升級(jí)的AI Infra到底有哪些重磅更新?
阿里云
云服務(wù)
2024-11-02
AI時(shí)代云安全新范式,阿里云安全能力全線升級(jí)!
AI時(shí)代云安全新范式,阿里云安全能力全線升級(jí)!
AI時(shí)代,云安全面臨著新的挑戰(zhàn),不僅要持續(xù)面對(duì)以往的傳統(tǒng)問題,更需要全新理念落地于產(chǎn)品設(shè)計(jì)、技術(shù)演進(jìn)、架構(gòu)設(shè)計(jì),才能實(shí)現(xiàn)效果、性能、和成本的最優(yōu)解。
AI
阿里云
云服務(wù)
2024-09-27
連續(xù)四年!阿里云領(lǐng)跑中國(guó)公有云大數(shù)據(jù)平臺(tái)
連續(xù)四年!阿里云領(lǐng)跑中國(guó)公有云大數(shù)據(jù)平臺(tái)
近日,國(guó)際數(shù)據(jù)公司(IDC)發(fā)布《中國(guó)大數(shù)據(jù)平臺(tái)市場(chǎng)份額,2023:數(shù)智融合時(shí)代的真正到來(lái)》報(bào)告——2023年中國(guó)大數(shù)據(jù)平臺(tái)公有云服務(wù)市場(chǎng)規(guī)模達(dá)72.2億元人民幣,其中阿里巴巴市場(chǎng)份額保持領(lǐng)先,占比達(dá)40.2%,連續(xù)四年排名第一。
阿里云
云服務(wù)
2024-09-18
優(yōu)質(zhì)服務(wù)商推薦
更多
掃碼登錄
打開掃一掃, 關(guān)注公眾號(hào)后即可登錄/注冊(cè)
加載中
二維碼已失效 請(qǐng)重試
刷新
賬號(hào)登錄/注冊(cè)
個(gè)人VIP
小程序
快出海小程序
公眾號(hào)
快出海公眾號(hào)
商務(wù)合作
商務(wù)合作
投稿采訪
投稿采訪
出海管家
出海管家