我要投稿

英伟达新品“掌心AI超算”，¥1800跑8B多模态模型，算力暴增70%价格腰斩

发布日期：2024-12-18 23:34:01 浏览次数： 2135

作者：量子位

微信搜一搜，关注“量子位”

“英伟达版树莓派”这波良心了，性能涨70%，降价50%。

老黄召开厨房发布会，从烤箱里端出这台“掌心AI超算”。

‍

△怎么不穿皮衣了

新版Jetson Orin Nano开发版套件，算力从40 TOPS涨到67 TOPS（INT8），内存带宽增加50%，达到102GB/s，功耗仅25瓦。

价格却降了50%，从$499降到$249（约人民币1800元）。

67 TOPS什么概念？

比目前英特尔、AMD或高通AI PC中的大部分NPU都快
能跑主流的7B、8B大模型量化版，如阿里Qwen，Llama等‍
最高支持4个摄像头，也能跑8B的视觉语言模型和ViT模型

英伟达称这是“最实惠的生成式AI超级计算机”。

无论是用来创建基于RAG的聊天机器人、视觉AI Agent，还是部署基于AI的机器人，都是理想的解决方案。

开发套件包括一个Jetson Orin Nano 8GB系统级模块（SoM）和一个参考载板，可用于边缘AI应用的原型设计，功耗最高25w。

采用6核Arm CPU和NVIDIA Ampere架构GPU，GPU配备1024个CUDA核心和32个张量核心，支持多个并发AI应用管道和高性能推理。它最多可以支持4个摄像头，提供比以前版本更高的分辨率和帧率。

The Register估计在运行4位量化版Llama 3.1 8B模型时，能达到约18-20 tokens/s的速度。

Jetson支持一系列英伟达AI软件，包括用于机器人的NVIDIA ISAAC、用于视觉AI的NVIDIA Metropolis 和用于传感器处理的NVIDIA Holoscan。

另外可以使用NVIDIA Omniverse Replicator生成合成数据，并使用NVIDIA TAO工具包微调预训练模型，可以缩短开发时间。

老黄称这个系列为一种全新的处理器——机器人处理器。

推出第一代产品时，没人理解英伟达在做什么
到现在，它已经支持了各种机器人，带轮子的、两条腿的、三条腿的。

额外的好消息是，新推出的软件更新，也将为买过旧版开发套件的用户带来生成式AI性能提升。

有网友表示，黄仁勋就是新的圣诞老人。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费POC验证，效果达标后再合作。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-10-29

KnowFlow 无缝衔接 Dify，分块支持添加父标题、Title 切块支持自定义标题层级切割、图片理解新增支持上下文

2025-10-28

邪修榨干元宝AI录音笔：白天工作，晚上陪聊

2025-10-27

免费又好用的AI录音笔都出来了，这下哪还有理由不学习？

2025-10-24

Aiops探索：我用Dify结合k8s的api做了一个非常简单的Aiops智能体

2025-10-24

阿里夸克AI眼镜开售：叠加补贴后3699元，它能打破AI眼镜的魔咒吗？

2025-10-23

Dify平台集成阿里云AI安全护栏，构建AI Runtime安全防线

2025-10-13

Dify + 飞书组合拳：企业级 AI 安全大脑落地全指南，助力安管效率提升 300%

2025-09-23

专访Plaud中国区CEO：我们只做“必须做”和“不做要死”的事

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

刚刚，港版 iPhone 17 Air 抢空！eSIM+系统级AI，国行果粉实名羡慕

2025-09-19

AI录音卡片大比拼：一文讲懂谁更值得买

2025-09-02

Dify + 飞书组合拳：企业级 AI 安全大脑落地全指南，助力安管效率提升 300%

2025-10-13

AI硬件的Aha Moment到了吗？

2025-09-02

阿里夸克AI眼镜开售：叠加补贴后3699元，它能打破AI眼镜的魔咒吗？

2025-10-24

我用飞书表格，实现门店的多屏的无人化管理

2025-08-25

Rokid Glasses优化设想

2025-09-05

为什么钉钉、360也要入局AI录音卡片？被种草之后一个反思：虽然很好用，但Rabbit R1的致命问题依旧存在

2025-09-02

我把滴滴出行MCP当成老年机来用，效果太棒了

2025-08-22

一款让人欲罢不能的AI硬件

2025-08-28

大家都在问

免费又好用的AI录音笔都出来了，这下哪还有理由不学习？

2025-10-27

阿里夸克AI眼镜开售：叠加补贴后3699元，它能打破AI眼镜的魔咒吗？

2025-10-24

AI硬件的Aha Moment到了吗？

2025-09-02

粉笔推出AI智能音箱：AI战略重要一环？

2025-08-15

微信支付这波操作把我干懵了，Agent能赚钱？

2025-07-08

OpenAI 的第一款 AI 硬件，竟然是一支笔？

2025-07-08

企业当前适合引入大模型驱动的智能运维吗？

2025-05-27

我们是否应该用 Lite-GPU 构建 AI 集群？

2025-05-24

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB