欧美❌❌❌❌❌❌JAPPT0Qwen2.5登上全球开源王座，72B模型击败LIa欧美❌❌❌❌❌❌JAPPT0ma3 405B，轻松胜过GPT-4o-mini_ZAKER新闻
Qwen2.5登上全球开源王座，72B模型击败LIa欧美❌❌❌❌❌❌JAPPT0ma3 405B，轻松胜过GPT-4o-mini_ZAKER新闻
据SATS报道，由于原内容尚在经过同行评议，发布行为本身属于失误，所以目前该摘要已被世卫组织删除，但STATS已用屏幕截图形式将内容固定了下来。
在指令跟踪、长文本生成、结构化数据理解和结构化输出生成方面均有显著提升。击败 LIama3！Qwen2.5 登上全球开源王座。而后者仅以五分之一的参数规模，就在多任务中超越 LIama3 405B。各种任务表现也远超同类别的其他模型。跟上一代相比，几乎实现了全面提升，尤其在一般任务、数学和编码方面的能力表现显著。值得注意的是，此次 Qwen 可以说是史上最大规模开源，基础模型直接释放了 7 个参数型号，其中还有六七个数学、代码模型。像 14B、32B 以及轻量级 Turbo 模型胜过 GPT-4o-mini。除 3B 和 72B 模型外，此次所有开源模型均采用 Apache 2.0 许可。Qwen2.5：0.5B、1.5B、3B、7B、14B、32B 和 72BQwen2.5-Coder：1.5B、7B 和 32B（on the way）Qwen2.5-Math：1.5B、7B 和 72B。直接一整个眼花缭乱，已经有网友开始用上了。Qwen2.5 72B 与 LIama3.1 405B 水平相当相比于 Qwen2 系列，Qwen2.5 系列主要有这么几个方面升级。首先，全面开源。他们研究表明，用户对于生产用的 10B-30B 参数范围以及移动端应用的 3B 规模的模型有浓厚兴趣。因此在原有开源同尺寸（0.5/1.5/7/72B）基础上，还新增了 14B、32B 以及 3B 的模型。同时，通义还推出了 Qwen-Plus 与 Qwen-Turbo 版本，可以通过阿里云大模型服务平台的 API 服务进行体验。可以看到，超半数模型都支持 128K 上下文，最多可生成 8K 上下文。在他们的综合评测中，所有模型跟上一代相比实现了能力的跃迁，比如 Qwen2.5-32B 胜过 Qwen2-72B，Qwen2.5-14B 胜过 Qwen2-57B-A14B。其次，预训练数据集更大更高质量，从原本 7 万亿个 token 扩展到最多 18 万亿个 token。然后就是多方面的能力增强，比如获得更多知识、数学编码能力以及更符合人类偏好。此外，还有在指令跟踪、长文本生成（从 1k 增加到 8K 以上 token）、结构化数据理解（如表格）和结构化输出生成（尤其是 JSON）方面均有显著提升。来看看实际效果。表格理解生成 JSON 输出此外，Qwen2.5 模型总体上对系统提示的多样性具有更强的适应能力，增强了聊天机器人的角色扮演实现和条件设定能力。那么就来看看具体模型能力如何。旗舰模型在前文已经看到，它在各个任务都有明显的进步。而像 0.5B、1.5B 以及 3B 这样的小模型，性能大概是这样的：值得注意的是，Qwen2.5-0.5B 型号在各种数学和编码任务上的表现优于 Gemma2-2.6B。除此之外，Qwen2.5 还展现了指令调优之后的模型性能，72B-Instruct 在几项关键任务中超越了更大的 Llama-3.1-405B，尤其在数学（MATH：83.1）、编码（LiveCodeBench：55.5）和聊天（Arena-Hard：81.2）方面表现出色。还有像 32B-Instruct、14B-Instruct 以及 Qwen2.5-Turbo，展现了与 GPT-4o-mini 相当的能力。Qwen 史上最大规模开源除了基础模型，此次 Qwen 还放出了代码和数学专业模型。Qwen2.5-Coder 提供了三种模型大小：1.5B、7B 和 32B 版本（即将推出）。主要有两点改进：代码训练数据规模的扩大以及编码能力的增强。Qwen2.5-Coder 在更大规模的代码数据上进行训练，包括源代码、文本代码基础数据和合成数据，总计 5.5 万亿个 token。它支持 128K 上下文，覆盖 92 种编程语言。开源的 7B 版本甚至超越了 DeepSeek-Coder-V2-Lite 和 Codestral 等更大型的模型，成为目前最强大的基础代码模型之一。而数学模型这边，Qwen2.5-Math 主要支持通过 CoT 和 TIR 解决英文和中文数学问题。目前不建议将此系列模型用于其他任务。Qwen2.5-Math 这一系列开源了包括基础模型 Qwen2.5-Math-1.5B/7B/72B、指令调优模型 Qwen2.5-Math-1.5B/7B/72B-Instruct，以及数学奖励模型 Qwen2.5-Math-RM-72B。与 Qwen2-Math 系列仅支持使用思维链（CoT）解决英文数学问题不同，Qwen2.5-Math 系列扩展支持使用思维链和工具集成推理（TIR）解决中英文数学问题。跟上一版本相比，他们主要干了这三件事来实现基础模型升级。利用 Qwen2-Math-72B-Instruct 模型来合成额外的高质量数学预训练数据。从网络资源、书籍和代码中收集更多高质量的数学数据，尤其是中文数据，跨越多个时间周期。利用 Qwen2.5 系列基础模型进行参数初始化，展现出更强大的语言理解、代码生成和文本推理能力。最终实现了能力的提升，比如 1.5B/7B/72B 在高考数学问答中分别提升了 3.4、12.2、19.8 分。好了，以上是 Qwen2.5 系列一整套堪称「史上最大规模」的开源。不叫草莓叫猕猴桃阿里通义开源负责人林俊旸也分享了背后的一些细节。他首先表示，在开源 Qwen2 的那一刻就开始了 Qwen2.5 项目。在这过程中，他们认识到了很多问题和错误。比如在预训练方面，他们们只是专注于提高预训练数据的质量和数量，使用了很多大家熟悉的方法。比如文本分类器用于召回高质量数据，LLM 评分器用于对数据进行评分，这样就能在质量和数量之间取得平衡。还有在创建专家模型的同时，团队还利用它们生成合成数据。在后期训练时候，用户的反馈来帮助他们逐一解决问题，同时他们也在探索 RLHF 方法，尤其是在线学习方法。对于之后的升级和更新，他表示受 o1 启发，认为应该深入研究推理能力。值得一提的是，在 Qwen2.5 预热之时，他们团队就透露不叫草莓，叫猕猴桃。好了，现在猕猴桃可以快快用起来了。参考链接： [ 1 ] https://x.com/JustinLin610/status/1836461575965938104 [ 2 ] https://x.com/Alibaba_Qwen/status/1836449414220779584 [ 3 ] https://qwenlm.github.io/blog/qwen2.5/ [ 4 ] https://qwenlm.github.io/blog/qwen2.5-llm/ [ 5 ] https://qwenlm.github.io/blog/qwen2.5-coder/ [ 6 ] https://qwenlm.github.io/blog/qwen2.5-math/本文来自微信公众号 " 量子位 "，作者：白小交。koa12jJid0DL9adK+CJ1DK2K393LKASDad
编辑:王仁兴
TOP1热点：2 月 28 日起，200 种中药配方颗粒纳入北京医保，对病患者有什么影响？
而2013年起白酒行业开始经历三年的调整期，包括茅台在内的高端酒滞销，一部分茅台经销商又开始转让经营权。茅台也在那会推出了“打款配经销权”，以此吸引经销商。但这期间，经销商的渠道利润空间不大。。
TOP2热点：为什么说汉字会为中国 AI 插上腾飞的翅膀？
据媒体公开报道，截至目前，全国已有多省存在赤霉病暴发风险。在专业领域，所谓的“暴发风险”是如何测算出来的？张昊说，从预测预报的角度上讲，风险主要取决于两方面，一是病原菌的数量，二是当地的气候条件。
此外，美国男冰也获得过两次冬季奥运会冠军和两次男子冰球世界锦标赛冠军。相比加拿大和美国队，德国男冰战绩稍差，但也获得过平昌冬奥会亚军。
TOP3热点：同样是《哪吒之魔童闹海》中的美女反派，为何西海龙王敖闰的人气远比鹤童高?一性一爱一乱一怆一情
另一位专家同日对《环球时报》表示，这是中国军队积极维护地区和平稳定的又一例证，彰显中国军人文明之师、和平之师的良好形象。“在中国国内面临重大新冠肺炎疫情影响之际，人民解放军第一时间组成强大力量赶赴疫情重灾区，迅速控制和稳定了疫情，为中国抗击疫情取得阶段性的胜利起到了中流砥柱的作用。此次行动不仅证明了人民军队爱人民的政治属性，也显示了人民解放军召之即来、来之能战、战之必胜的强大战斗力，现在又马不停蹄地积极投身到世界抗击疫情的斗争中。”
TOP4热点：申公豹的雷公鞭究竟有多强？为什么能让太上老君和元始天尊也忌惮不已？Al迪丽热巴为人造梦
张大利，男，满族，1989年6月10日出生，身高169厘米左右，户籍地：吉林省伊通满族自治县西苇镇孤山河村三组，身份证号码：152221198906101419。
TOP5热点：金州勇士，为什么要吉米•巴特勒？反差婊吃瓜黑料热门网曝
在移动互联网时代的媒介迭代背景下，社会运动虚拟化，恐怖袭击在虚拟空间进行演练，并不是在香港的“反修例”风波中才出现的新鲜事。
TOP6热点：美国科学院院刊显示，朱经武院士团队首次实现 BST 高压超导相结构的常压室温稳定，其研究有哪些价值？½大好深色水好多
4月24日0时至24时，新增航空境外输入确诊病例1例。截至4月24日24时，累计航空境外输入确诊病例11例，治愈出院8例，现有境外输入确诊病例3例。累计航空境外输入无症状感染者4例，尚在医学观察1例。
TOP7热点：为什么玩马可的，上来就喜欢给辅助一梭子？中国XMXM18小孩的推荐机制
对于2019年净利润的同比减少，黄山旅游方面表示，主要系公司2018年度处置部分华安证券股票增加当年净利润1.97亿元所致；而对于营收的下降，黄山旅游并未做过多明确解释。有分析认为，在景区游客量增速止跌的背景下，黄山旅游营收微跌或与门票等价格下调有一定的关系。
TOP8热点：为什么元朝也有北方边患?14may18_XXXXXL56endian409
点评：本案系动漫卡通形象著作权侵权的典型案件。该案的查办对准确把握美术作品的复制权侵权行为、著作权行政执法中对实质性相似的认定方法等问题进行了有益探索，对加强动漫卡通领域著作权保护具有借鉴意义。
TOP9热点：程序员如何用好 Cursor 工具？小杰快拨出我是你小䧅
不过，4月16日，吉利德方面向红星新闻确认，由于入组人数低，由中国研究机构牵头的瑞德西韦针对新型冠状病毒肺炎重症患者和轻中症患者的两项临床研究已提前终止。据第一财经4月16日报道，尽管瑞德西韦中国的临床试验宣布停止，但是重症组已经收集到有效数据，相关结果有望于近期公布。对于该说法，4月16日，红星新闻未从吉利德方面得到确认。
TOP10热点：2025 年 wta1000 多哈站女单第二轮，郑钦文 0：2 不敌突尼斯老将贾巴尔，怎么评价她近阶段的状态？白嫩白嫩BBBBBBBBB-
连花清瘟产品亦是以岭药业主导产品，2019年前三季度，连花清瘟产品实现营业收入14.15亿元，占以岭药业总营业收入的32.54%。以岭药业同时表示，目前海外销售收入占公司营业总收入比例较低，暂未实现规模销售，对公司经营业绩不构成重大影响。