360联合北大震撼发布!5%参数量逼近Deepseek-R1满血性能

2025年2月24日——由360与北京大学联合研发的中等量级推理模型Tiny-R1-32B-Preview正式亮相,仅以5%参数,逼近Deepseek-R1-671B的性能。

67bd44202757c

核心突破:小模型,大能量

▪  数学领域:以78.1分(AIME 2024评测)逼近原版R1模型(79.8分),远超Deepseek-R1-Distill-Llama-70B(70.0分);

▪  综合性能:在编程(LiveCodeBench 61.6分)、科学(GPQA-Diamond 65.0分)领域全面领先最佳开源70B模型Deepseek-R1-Distill-Llama-70B;

▪  效率跃迁:仅需5%参数量,性能达原版R1的95%以上,推理成本大幅降低。

技术革新:领域专精+模型融合

研究团队使用「分治-融合」策略:

▪  基于DeepSeek-R1生成海量领域数据,分别训练数学、编程、科学三大垂直模型;

▪  通过Arcee团队Mergekit工具智能融合,突破单一模型性能上限,实现多任务均衡优化。

开源承诺:推动技术普惠

▪  模型仓库:https://huggingface.co/qihoo360/TinyR1-32B-Preview

▪  即将公开完整技术报告、训练代码及部分数据集;  

▪  践行开源精神,助力AI社区共筑高效推理新生态。

研发团队表示:「Tiny-R1-32B-Preview是蒸馏技术的里程碑,未来将持续探索更轻量、更强大的通用模型,推动AI技术普惠化进程。」

360 团队: Lin Sun, Guangxiang Zhao, Xiaoqi Jian, Weihong Lin, Yongfu Zhu, Change Jia, Linglin Zhang, Jinzhu Wu, Sai-er Hu, Xiangzheng Zhang

北大团队: Yuhan Wu, Zihan Jiang, Wenrui Liu, Junting Zhou, Bin Cui, Tong Yang

GE3nTG4Earu366mgzjgTTxg8brllfWIOBP6DkWYc

60f0f9e8-e96d-46fb-8b38-72f87ff62192

本网站有部分内容均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除,不承担任何侵权责任。转转请注明出处:https://sx.sychwlgzs.com/7223.html

(0)
上一篇 2025年2月20日 下午9:02
下一篇 2025年2月25日 下午3:48

相关推荐

  • 戴尔全球首款6K IPS Black显示器上市:配4K摄像头

    5月11日消息,戴尔的全球首款6K IPS Black显示器——U3224KB,目前已经上架,价格为3199.99美元(约合人民币22186元)。据介绍,这款显示器采用IPS Black面板,刷新率为60Hz,对比度为2000:1,提供了100% sRGB和99% DCI-P3色域,得到了DisplayHDR 600认证。 同时,U3224KB顶部还配有4K…

    2023年5月11日
    0
  • AMD RX 7600提升太有限!就这怎么打RTX 4060?

    AMD RX 7600系列、NVIDIA RTX 4060系列的正面对决即将打响,双方都选择了在本月底登场。这将是主流玩家的新一代首选,更加甜点,但也不指望回到曾经的甜点价。 现在,曝料高手momomo_us首次给出了RX 7600的核心规格,集成32个RDNA3 CPU单元,等效于2048个流处理器,自然同时还有32个光追单元、64个AI单元。 这样的核心…

    2023年5月11日
    0
  • 中国民营可回收火箭再获突破:星际荣耀双曲线二号精准着陆 圆满成功

    中国民营可回收火箭再获突破:星际荣耀双曲线二号精准着陆 圆满成功 11月2日消息,我们从星际荣耀空间科技股份有限公司获悉,今天下午14点整,该公司公司自主研发的液氧甲烷可重复使用验证火箭双曲线二号(代号 SQX-2Y)在我国酒泉卫星发射中心点火升空。 1分钟后,火箭在目标着陆点平稳精确着陆,火箭状态安全恢复,飞行试验任务取得圆满成功。据悉,此次任务属于国内首…

    2023年11月2日
    0
  • 首发澎湃OS!小米14定档10月26日发布

    10月23日消息,小米官方正式宣布,将于10月26日万7点召开新品发布会,正式推出小米14系列、小米澎湃OS。官方强调,这是小米的跨越时刻。小米14系列将全面“跨越式升级”,同时还有澎湃OS正式亮相,开启人车家全生态互联。从宣传图来看,小米14系列将依然延续小米13上备受好评的直角中框设计,外观比较硬朗,材质为亮面金属。 因为不锈钢材质太重,目前已经几乎被手…

    2023年10月19日
    0
  • 星恒突破行业内卷效应,超钠F1开启电池新竞争时代

    随着我国进入到绿色出行时代,交通领域对于电池的需求也越来越高,动力电池的影响力已经在慢慢改变全球的产业结构。随着这一赛道的国内外竞争日趋激烈,电池也开始“内卷”起来,如何提升产品的竞争力成为行业话题,同样的,这也意味着用户在这一领域的产品要求也越来越高。 为保障产品的竞争力,星恒电源一直都在积极推动新品研发的工作,超钠F1就是公司产品规划当中非常重要的产品。…

    2023年9月30日
    0