【ITBEAR】9月19日消息，在2024年的云棲大會(huì)上，阿里云CTO周靖人揭曉了通義千問的新一代開源模型——Qwen2.5。這一全新模型系列覆蓋了多種尺寸的大語言模型、多模態(tài)模型、數(shù)學(xué)模型以及代碼模型，且每一尺寸模型都提供了基礎(chǔ)版、指令跟隨版及量化版，累計(jì)發(fā)布了超過100個(gè)模型。
值得一提的是，旗艦版模型Qwen2.5-72B在性能上已超越了擁有4050億參數(shù)的Llama 405B，展現(xiàn)了卓越的能力。在MMLU-rudex、MBPP及MATH三大基準(zhǔn)測(cè)試中，Qwen2.5-72B分別取得了86.8、88.2和83.1的高分，顯示出其強(qiáng)大的通用知識(shí)、編程及數(shù)學(xué)能力。
據(jù)ITBEAR了解，與Qwen2相比，Qwen2.5系列的所有模型均在18T tokens的數(shù)據(jù)集上進(jìn)行了預(yù)訓(xùn)練，從而實(shí)現(xiàn)了整體性能18%以上的提升。這些模型不僅增強(qiáng)了知識(shí)儲(chǔ)備，還在編程和數(shù)學(xué)方面展現(xiàn)出更高的能力。特別是Qwen2.5-72B模型，其上下文長(zhǎng)度可達(dá)128K，生成內(nèi)容最多為8K，并支持包括中文、英文、法文等在內(nèi)的29種以上語言。
在專項(xiàng)模型領(lǐng)域，Qwen2.5也取得了顯著進(jìn)步。例如，專為編程設(shè)計(jì)的Qwen2.5-Coder在5.5T tokens的編程數(shù)據(jù)上進(jìn)行了訓(xùn)練，并開源了1.5B和7B兩個(gè)版本，未來計(jì)劃開源32B版本。同時(shí)，Qwen2.5-Math模型則能夠運(yùn)用思維鏈和工具集成推理（TIR）解決中英雙語的數(shù)學(xué)問題，目前已開源了1.5B、7B、72B三個(gè)尺寸及一款數(shù)學(xué)獎(jiǎng)勵(lì)模型Qwen2.5-Math-RM。
此外，阿里云還宣布開源了視覺語言模型Qwen2-VL-72B。該模型能夠識(shí)別各種分辨率和長(zhǎng)寬比的圖片，理解超過20分鐘的長(zhǎng)視頻，并具備操作手機(jī)和機(jī)器人的視覺智能體能力。
阿里云通過不斷創(chuàng)新和優(yōu)化其AI模型，正逐步鞏固其在全球開源大模型領(lǐng)域的領(lǐng)先地位。Qwen2.5系列的推出，無疑為AI技術(shù)的發(fā)展注入了新的活力。
#阿里云# #Qwen2.5# #開源模型# #人工智能# #AI技術(shù)#
