通義千問720億參數(shù)模型開源 實現(xiàn)“全尺寸全模態(tài)”開源

通義千問720億參數(shù)模型開源 實現(xiàn)“全尺寸全模態(tài)”開源

【CNMO新聞】12月1日消息，在通義千問發(fā)布會上，阿里云開源通義千問720億參數(shù)模型Qwen72B，此外，18億參數(shù)模型Qwen1.8B和音頻大模型QwenAudio也一同開源，阿里云在業(yè)界率先實現(xiàn)“全尺寸、全模態(tài)”開源。

據(jù)悉，通義千問720億參數(shù)模型Qwen72B在10個權(quán)威基準(zhǔn)測評創(chuàng)下開源模型最優(yōu)成績，成為業(yè)界最強開源大模型，性能超越開源標(biāo)桿Llama 270B和大部分商用閉源模型，可適配企業(yè)級、科研級的高性能應(yīng)用。并且阿里云本次開源的模型中除預(yù)訓(xùn)練模型外，還同步推出了對應(yīng)的對話模型，面向72B、1.8B對話模型提供了4bit/8bit量化版模型，便于開發(fā)者們推理訓(xùn)練。

關(guān)于開源，阿里云CTO周靖人曾經(jīng)表示過，阿里云將持續(xù)擁抱開源開放，推動中國大模型生態(tài)建設(shè)。阿里云篤信開源開放的力量，率先開源自研大模型，希望讓大模型技術(shù)更快觸達中小企業(yè)和個人開發(fā)者。