我要投稿

小模型界o1来了：微软推出Phi-4，数学推理能力太逆天！14B模型击败GPT-4o！还印证了AI墙的一个重要推断

发布日期：2024-12-13 18:54:16 浏览次数： 2045

作者：51CTO技术栈

微信搜一搜，关注“51CTO技术栈”

家人们，微软Phi-4的数学能力太逆天了。谁看了不感慨一句：小模型才是未来！

8个月前，微软发布了Phi-3，性能超过庞然大物Llama-3，狠狠惊艳了我们一把。

8个月后，Phi-4飞跃式突破，让所有人知道谁才是小模型唯一的王！

自几个月前o1发布后，模型“搞定”数理化的能力已经飞升到博士级别，大模型也纷纷在推理能力上进行追赶。

而Phi-4祭出了小模型的王炸，14B小小模型，在数学推理上竟然反超多模态大模型Gemini Pro 1.5 两分之多！

在「AI撞墙」被热烈讨论的一天，微软另辟蹊径，似乎告诉AI公司：别再傻傻地Scaling了！

14B小模型，也能懂数学推理！

Phi-4确实可以进行思维推理！

在微软给的案例中，Phi-4在解题过程中展现了清晰的推理链条，成功解决了蜗牛难题！

问题：在一场由 5 只蜗牛参加的比赛中，最多可能出现一场平局，但平局可以涉及任意数量的蜗牛。例如，比赛结果可能是 Dazzler 获得第一名，Abby、Cyrus 和 Elroy 并列第二，Bruna 获得第五名。那么，比赛的可能结果总共有多少种？

Phi-4根据题干，先计算了没有平局出现的情况，为120种。

然后在有一场平局的情况中，继续按照“选择 k 只蜗牛组成平局组”的思路分解问题，最终得出了正确回答。

这一能力表明，Phi-4在科学研究、工程和金融建模等领域未来可期！

也让我们对端侧模型的未来更加期待了！对于许多应用来说，这种针对性的卓越性能比大型模型的广泛但较低效的能力更有价值得多。

模型访问：azure独家首发，下周登陆抱抱脸

比较可惜的是，Phi-4目前的可用性有限。

独家首发在了微软自家的Azure AI Foundry上使用，更多的面向科研用途。地址：

https://ai.azure.com/explore/models?&selectedCollection=phi

不过，按照计划下周会在Hugging Face平台上线。

这也算是微软在用Phi-4这张王牌，给Azure AI Foundry“引流”了。

Azure AI Foundry在去年推出，作为一个集中管理的中心，旨在帮助企业级用户管理项目、微调AI模型，并访问Azure AI服务。

在Phi-4技术报告中，还提到了该平台独特的内容安全功能。主要包括：

Prompt Shields（提示保护）：帮助应对潜在的提示攻击。
受保护内容检测：识别敏感或受限制的材料。
Groundedness Detection（扎实性检测）：确保生成内容有据可依。

AI墙绝不是危言耸听：已逼近预训练数据墙！

在Phi-4的报告中，Phi系列在性能上的“极致一跃”，被归功于合成数据和后期训练的提高和改进。

“在数学推理方面，Phi-4 的表现优于同类和更大型的模型，这得益于整个流程的进步，包括高质量合成数据集的使用、高质量有机数据的整理以及后期训练的创新。”

Phi展现了模型界的一种趋势，也反映着预训练的尴尬之处：大规模的预训练，通常需要海量的数据和计算资源。随着硬件能力的提升和模型规模的扩大，虽然模型性能逐渐增强，但增益的边际效应越来越小，即每次训练的优化效果趋于减弱。

Scale AI 首席执行官Alexandr Wang周四在一条推文中说："我们已经达到了预训练数据墙。"

国内则更早展现了这个趋势的“风声”。此前报道，国内大模型“六小虎”中至少有两家公司已经放弃了预训练，开始专注于AI应用层。

AI公司越来越认识到，预训练的烧钱带来的价值在走低，尤其是在硬件资源有限的情况下，开发大规模预训练模型可能难以为继。不如守好自己的用户，通过灵活的后期训练和反馈迭代，扎实地做好AI产品的落地。

另外，还有一个小插曲，Phi-4是微软Phi系列核心人物布贝克（Sébastien Bubeck），被OpenAI挖走后的首次更新！

在 2024 年加入 OpenAI 之前，Bubeck 在微软研究院工作了近十年，离职前为微软的人工智能副总裁。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-06-14

挑战 Transformer 架构的谷歌最新扩散模型 Gemini Diffusion 系统提示词

2025-06-14

“AI原生”时代：企业数智化转型的分水岭

2025-06-14

多模态RAG的三类图文问答实现方式，你知道多少种？

2025-06-14

新一代文本表征Qwen3-Embedding与排序模型Qwen3-Reranker 部署和替换

2025-06-14

“华强北”围攻AI耳机，未来智能如何突围？

2025-06-14

AI时代如何为企业和个人赋能

2025-06-14

没吃透 Function Calling？难怪你不理解 AI Agent 为何非来不可！

2025-06-14

浅尝一下微软的AutoGen框架

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

DeepSeek R1-0528 小版本升级

2025-05-29

🧠 解码大语言模型的记忆力：上下文长度的前世今生

2025-03-20

萌新指南｜手把手教你Cherry Studio配置MCP，10分钟让大模型学会上网截图！

2025-03-21

教你解决GPT4o无法使用新版生图功能的教程

2025-04-11

Manus 是大模型 AI Agent + MCP，那什么是模型上下文协议 (MCP)?

2025-03-20

不止核弹芯片，黄仁勋发布两台 AI 个人超算，还拿下全球最快 DeepSeek 推理速度

2025-03-19

聊聊大模型MCP模型上下文协议-为何是AI在企业内应用落地的一个关键组件

2025-03-20

用 Go 语言打造高并发 MCP 服务器：理论、实战与 AI 应用全景探索

2025-03-19

MCP如何重塑AI开发？一文带你深入了解

2025-03-19

黄仁勋 2 个半小时演讲，英伟达已经进入「Agentic AI」时代

2025-03-19

大家都在问

多模态RAG的三类图文问答实现方式，你知道多少种？

2025-06-14

“华强北”围攻AI耳机，未来智能如何突围？

2025-06-14

张鹏对谈李广密：Agent 的真问题与真机会，究竟藏在哪里？

2025-06-14

为什么说Maus是未来任务型AI系统的代表？

2025-06-14

一手实测：首个有记忆的企业级AI Agent，能否经得住实践捶打？

2025-06-13

聊透 Agent，它是「同事」还是「工具」，创业机会和价值究竟是什么？

2025-06-13

拒绝碎片化 RAG，谷歌 DeepMind 推出 ReadAgent：模拟人类阅读长文本，或是NotebookLM底层技术？

2025-06-13

字节跳动2步突破，复杂文档布局解析，为啥如此惊艳？

2025-06-13

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB