今天阿裏巴巴宣布旗下大型語言模型產品通義千問 7B 參數模型已經開源,該模型為完全開源、免費、可商用。這個模型包括兩個子模型,一個是通用型的 Qwen-7B 模型,另一個是對話模型 Qweb-7B-Chat,兩個模型均為開源免費可商用。 這兩個模型目前已經在阿裏達摩院的魔搭社區和國外知名 AI 模型社區 Hugging Face 上線,有興趣的用戶可以下載模型進行測試。
魔搭社區:https://modelscope.cn/models/qwen/Qwen-7B/summary Hugging Face:https://huggingface.co/Qwen/Qwen-7B Github:https://github.com/QwenLM/Qwen-7B 以下是阿裏雲對 Qwen-7B 模型的自述: 通義千問 – 7B(Qwen-7B) 是阿裏雲研發的通義千問大模型係列的 70 億參數規模的模型。Qwen-7B 是基於 Transformer 的大語言模型,在超大規模的預訓練數據上進行訓練得到。預訓練數據類型多樣,覆蓋廣泛,包括大量網絡文本、專業書籍、代碼等。同時,在 Qwen-7B 的基礎上,我們使用對齊機製打造了基於大語言模型的 AI 助手 Qwen-7B-Chat。Qwen-7B 係列模型的特點包括: 大規模高質量預訓練數據:我們使用了超過 2.2 萬億 token 的自建大規模預訓練數據集進行語言模型的預訓練。數據集包括文本和代碼等多種數據類型,覆蓋通用領域和專業領域。 優秀的模型性能:相比同規模的開源模型,Qwen-7B 在多個評測數據集上具有顯著優勢,甚至超出 12-13B 等更大規模的模型。評測評估的能力範圍包括自然語言理解與生成、數學運算解題、代碼生成等。 更好地支持多語言:基於更大詞表的分詞器在分詞上更高效,同時它對其他語言表現更加友好。用戶可以在 Qwen-7B 的基礎上更方便地訓練特定語言的 7B 語言模型。 8K 的上下文長度:Qwen-7B 及 Qwen-7B-Chat 均能支持 8K 的上下文長度,允許用戶輸入更長的 prompt。 支持插件調用:Qwen-7B-Chat 針對插件調用相關的對齊數據做了特定優化,當前模型能有效調用插件以及升級為 Agent。 |
2023“第一大镰刀”奥联电子被立案,这事儿不那么简单估值130亿美元!“狂飙”的极氪难以跳脱舆论漩涡救市第一枪能打多响?手机厂把BAT赶出车机座舱,车企要给苹果、小米打工了?谁亏损谁赚钱?20家光伏企业业绩出炉大局已定!三大运营商2023年数据出炉【洞察】半导体产业快速发展带动下 PBN(热解氮化硼)市场需求空间广阔中国新能源汽车区域产业吸引力榜:产业新版图正在形成2023年2月智能汽车研究月报追逐人工智能领域标杆的百度,四季度最大的惊喜竟是爱奇艺https://96vb4.shop/%e7%be%a9%e5%a4%a7%e5%88%a9%e9%9d%88%e7%b7%b9%e5%b9%bc%e7%8a%ac%e5%87%ba%e5%94%ae%ef%bc%9a%e6%96%b0%e6%89%8b%e9%a3%bc%e4%b8%bb%e5%bf%85%e7%9c%8b%e7%9a%845%e5%80%8b%e8%b6%85%e5%80%bc%e8%80%83%e9%87%8f/https://95mtn.shop/%e9%87%8c%e9%95%b7%e8%96%aa%e8%b3%87%ef%bc%9a2025%e5%b9%b4%e5%8f%b0%e7%81%a3%e5%9f%ba%e5%b1%a4%e5%85%ac%e8%81%b7%e4%ba%ba%e5%93%a1%e8%96%aa%e9%85%ac%e5%85%a8%e8%a7%a3%e6%9e%90%e8%88%87%e5%bd%b1/https://86aaj.shop/%e6%ad%b7%e5%8f%b2%e7%b3%bb%e5%be%8c%e6%82%94%ef%bc%9f5%e5%a4%a7%e9%81%8e%e4%be%86%e4%ba%ba%e8%a1%80%e6%b7%9a%e5%8b%b8%e5%91%8a/https://96vb4.shop/%e6%9c%80%e5%a5%bd%e9%a4%8a%e7%9a%84%e5%b0%8f%e5%9e%8b%e7%8a%ac%ef%bc%9a2025%e5%b9%b4%e7%b2%be%e9%81%b8%e6%8c%87%e5%8d%97%e8%88%87%e9%a3%bc%e9%a4%8a%e7%a7%98%e8%a8%a3/https://96vb4.shop/%e5%8f%b0%e7%81%a3%e9%a3%bc%e4%b8%bb%e5%bf%85%e7%9c%8b%ef%bc%9a5%e7%a8%ae%e6%9c%80%e9%81%a9%e5%90%88%e4%bd%a0%e7%9a%84%e9%99%aa%e4%bc%b4%e7%8a%ac%e7%a8%ae%e9%a1%9e%ef%bc%8c%e8%ae%93%e6%af%9b%e5%ad%a9/https://96vb4.shop/%e9%9b%9e%e6%af%8d%e8%9f%b2%e7%9a%84%e7%94%9f%e6%85%8b%e3%80%81%e8%be%a8%e8%ad%98%e8%88%87%e6%87%89%e7%94%a8%ef%bc%9a%e5%8f%b0%e7%81%a3%e5%9c%a8%e5%9c%b0%e6%8c%87%e5%8d%97-2025%e5%b9%b4%e7%89%88/https://96vb4.shop/%e8%b2%93%e5%92%aa%e7%9a%84%e5%83%b9%e6%a0%bc%ef%bc%9a2025%e5%b9%b4%e5%8f%b0%e7%81%a3%e7%b1%b3%e5%8a%aa%e7%89%b9%e8%b2%93%ef%bc%88minuet-cat%ef%bc%89%e7%9a%84%e5%b8%82%e5%a0%b4%e8%a1%8c%e6%83%85/https://95mtn.shop/%e7%a7%91%e7%b3%bb%ef%bc%9a2025%e5%b9%b4%e5%8f%b0%e7%81%a3%e5%a4%a7%e5%ad%b8%e7%94%9f%e5%bf%85%e8%ae%80%e7%9a%84%e7%a7%91%e7%b3%bb%e9%81%b8%e6%93%87%e6%8c%87%e5%8d%97%e8%88%87%e5%87%ba%e8%b7%af/https://95mtn.shop/%e8%80%83%e7%b8%bd%e5%b9%b9%e4%ba%8b%e8%ad%89%e7%85%a7%ef%bc%9a2025%e5%b9%b4%e6%96%b0%e6%89%8b%e5%bf%85%e5%82%99%e6%8c%87%e5%8d%97%e8%88%87%e5%b8%b8%e8%a6%8b%e7%96%91%e9%9b%a3%e8%a7%a3%e7%ad%94/https://95mtn.shop/%e6%a3%ae%e6%9e%97%e7%b3%bb%e5%87%ba%e8%b7%af%e7%9a%845%e5%a4%a7%e8%81%b7%e6%a5%ad%e6%96%b9%e5%90%91%e8%88%87%e5%af%a6%e9%9a%9b%e6%a1%88%e4%be%8b%e8%a7%a3%e6%9e%90-2025%e6%9b%b4%e6%96%b0/